LTO助推磁带大容量存储技术超越磁盘HDD

简介: LTO标准最初有两个格式,一个Ultrium,主要负责支持大容量技术,一个Accelis,主要负责高性能。磁带被采用的原因,目前跟性能也不相关,要性能的话,早就切换固态硬盘SSD了。所以目前一说LTO,基本上大家就等同于LTO Ultrium。

如前面提到,磁带的格式和技术标准,在之前有很多种类,也导致各种不兼容。为了解决这个问题,上世纪90年代,三个厂商联合研发线性磁带开放 技术,LTO,Linear Tape Open。LTO标准最初有两个格式,一个Ultrium,主要负责支持大容量技术,一个Accelis,主要负责高性能。磁带被采用的原因,目前跟性能也不相关,要性能的话,早就切换固态硬盘SSD了。所以目前一说LTO,基本上大家就等同于LTO Ultrium。

LTO Ultrium有自己的品牌和logo,也在不断推进LTO技术的发展。目前参与LTO Ultrium技术标准制定与推进的公司主要有:

  • Facebook
  • FujiFilm Corporation *
  • Hewlett Packard Enterprise *
  • IBM *
  • IMATION Corp.
  • Insurgo Media Services Limited
  • MAGSTOR
  • Maxell Holding, Ltd.
  • Quantum*
  • Silicon Craft Technology Public Company Limited
  • Sony Group Corporation *
  • SpectraLogic
  • Symply
  • TDK CORPORATION
  • Teijin Films Solutions Limited
  • Toray Industries, Inc.

LTO Ultrium技术在众多参与的者的推进下,目前已经发展到第九代Gen9,单个磁带盒非压缩容量可以支持18TB,压缩数据容量支持最大45TB,每个小时可以Navtive读写速率在400MB/s,压缩数据传输速率在1000MB/s,也就是每个小时可以读写3.6TB的数据。速率传输相对LTO6已经提升2倍多。

根据P5归档系统实际测试的速度,可以达到409.5MB/s,符合官网SPEC宣称标准。

LTO磁带已经远远超过机械硬盘的容量了,目前拥有HAMR/MAMR新技术加持的HDD最大容量也只有30TB。

在LTO Gen5以及之前的LTO代次,实现的压缩比主要是2:1, 在Gen6以后的压缩比已经达到2.5:1. LTO Ultrium目前已经设计了Gen14,单个磁带盒最大压缩数据可以存储1.44PB,数据存储量实在恐怖。

LTO除了高容量,在安全性方面也有自己的特点。整体来讲,LTO的安全性类似于一个加强版的RAID6系统+一个超强的纠删码ECC。RAID6的特性是容忍任意两个盘的故障,安全性比RAID5/RAID10要高。

LTO采用两纬交叉纠错码C1和C2,均采用Reed-Solomon ECC原理。C1负责每个通道meta data和user data的校验,C2负责C1编码后多个通道的meta data和user data校验。

在LTO8和LTO9技术标准中,提供两种纠错的模式:

  • All error: 该模式下C1/C2分别独立纠错校验,之间没有关联
  • Erasure(a=1): 该模式下,如果C1纠错失败,则会把纠错失败的信息传递给C2,C2会通过2Bytes校验的能力,发现并纠正一个字节的错误。

特别是在最新的LTO9技术标准中,C2 code参数比之前要多1倍,纠错效率基本不变。

UBER是表征数据读取过程数据出错的概率,与HDD相比,LTO9的UBER是1E-20,HDD是1E-15,高出5个数量级。也就是说,HDD读取125TB的数据过程就可能发生错误,而磁带读取12.5EB的数据才会发生错误,可靠性是相当的高了。不过要注意,磁带也是磁性存储,注意防潮和消磁的发生。

在可靠性评估过程中,我们还会使用一个9's量级的参数来体现耐久性:

  • 比如HDD的UBER是1e-15,也就是在读取10^15bit中,有一个错误。换算出10^15bits/(4096bytes*8bits/byte)=3.05E+10, 我们就称这个是10个9的耐久性
  • LTO9磁带的耐久性是12个9,比HDD高出2个数量级。

此外,由于一些特殊的场景,比如SEC的安全法规要求,电子信息存储必须要使用不可复写的设备。这个就需要有存储介质有WORM (write once, read many,只写一次,可读多次)的特性。这个也是LTO磁带具有的特性。具有WORM这个特性,可以防止数据被篡改,保持数据的长久存储。

SEC 17a-4(f)(2)(ii)(A):“The electronic storage media must preserve the records exclusively in a non-rewriteable, non-erasable format.”

WORM数据保护特性,分为多个等级安全标准,可以通过软件/固件FW限制实现只允许写一次的功能,最安全的还是通过物理介质实现只写一次的WORM安全特性,也是安全等级最高的实现方式。

厂商在提供磁带的时候,一般会用介质盒不同的颜色来区分是否是WORM介质磁带,比如Fujifilm的LTO5两款磁带,左边Non-WORM磁带是整体红色盒子,右边WORM磁带是灰色+红色的盒子。

相关文章
|
机器学习/深度学习 存储 SQL
全栈开发之MySQL主从同步,读写分离后可能引发的问题
全栈开发之MySQL主从同步,读写分离后可能引发的问题
724 0
全栈开发之MySQL主从同步,读写分离后可能引发的问题
|
7月前
|
数据采集 缓存 监控
爬虫代理IP突然失效的应急处理指南
在爬虫开发中,代理IP是绕过反爬机制的重要工具,但其失效可能导致采集中断甚至IP封禁。本文结合实际场景,总结了代理IP失效时的应急处理方案,包括快速切换备用代理池、调整请求策略、启用本地缓存等,并提出了长期稳定策略,如IP质量监控、选择优质服务商、多协议支持与混合IP使用,帮助开发者构建高效稳定的爬虫系统。
231 0
|
10月前
|
JSON API 数据安全/隐私保护
《揭秘:抖音电商 API 接口,让直播带货数据精准掌控!》
在数字营销时代,抖音电商API为直播带货提供数据支持。通过API可实时获取销售、用户互动等关键数据,助力商家优化策略,实现自动化分析与精准营销,提升效率并驱动业务增长。
1194 0
|
存储 监控 安全
Keepalive 具体介绍
Keepalive 具体介绍
|
Java 数据库连接 mybatis
MyBatis篇-映射关系(1-1 1-n n-n)
本文介绍了MyBatis中四种常见关系映射的配置方法,包括一对一、一对多、多对一和多对多。**一对一**通过`resultMap`实现属性与字段的映射;**一对多**以用户-角色为例,使用`<collection>`标签关联集合数据;**多对一**以作者-博客为例,利用`<association>`实现关联;**多对多**则通过引入第三方类(如UserForDept)分别在User和Dept类中添加集合属性,并配置对应的`<collection>`标签完成映射。这些方法解决了复杂数据关系的处理问题,提升了开发效率。
|
Java Linux iOS开发
窗口命令怎么查看正在运行的jar包并杀死该进程
窗口命令怎么查看正在运行的jar包并杀死该进程
1563 0
|
Linux 网络安全 Windows
CentOs主机能够ping通虚拟机,虚拟机无法ping通主机 解决方案
CentOs主机能够ping通虚拟机,虚拟机无法ping通主机 解决方案
1080 0
CentOs主机能够ping通虚拟机,虚拟机无法ping通主机 解决方案
|
缓存 安全 小程序
从基础到进阶:掌握Java中的Servlet和JSP开发
【6月更文挑战第23天】Java Web开发中的Servlet和JSP是关键技术,用于构建动态网站。Servlet是服务器端小程序,处理HTTP请求,生命周期包括初始化、服务和销毁。基础Servlet示例展示了如何响应GET请求并返回HTML。随着复杂性增加,JSP以嵌入式Java代码简化页面创建,最佳实践提倡将业务逻辑(Servlet)与视图(JSP)分离,遵循MVC模式。安全性和性能优化,如输入验证、HTTPS、会话管理和缓存,是成功应用的关键。本文提供了一个全面的学习指南,适合各级开发者提升技能。
315 7
|
机器学习/深度学习 人工智能 供应链
人工智能在社会中的影响与未来展望
人工智能(AI)作为一项重要的技术革新,正在深刻地改变着我们的生活方式、工作方式以及社会结构。本文旨在探讨人工智能在社会中的影响,并展望其未来发展趋势。首先,我们回顾了人工智能的发展历程,从其起源到当前的发展阶段,概述了人工智能技术的基本原理和应用领域。其次,我们分析了人工智能对各个行业的影响,包括但不限于医疗保健、金融、制造业、交通运输和教育等领域。人工智能的广泛应用使得这些行业更加智能化、高效化,但也带来了一些挑战,如就业岗位的变化、隐私安全问题等。接着,我们讨论了人工智能在社会中的伦理和道德问题,包括人工智能算法的公平性、透明性和责任问题。最后,我们展望了人工智能的未来发展,包括强化学习
1005 0
|
移动开发 前端开发 JavaScript
HTML5 Canvas实现360度全景图
HTML5 Canvas实现360度全景图
349 1

热门文章

最新文章

下一篇
开通oss服务