【存储】RAID 2.0技术探索
前言
提到RAID,大家可能会先想到RAID5、RAID6,不过今天不讲这些,讲讲做RAID以后数据最终是如何存放在硬盘上的。为啥要讲这个?难道你就不好奇存储设备在进行RAID的时候为啥要限制磁盘数量,是依据什么限制的,同时在进行存储设备选择的时候应该考虑哪些参数,优先级如何等等
说明
- 说明1:做RAID就是把多个独立的物理磁盘组合成一个逻辑磁盘(逻辑磁盘还是磁盘),目的是提高总体的IO性能和冗余度
- 说明2:RAID1.0和RAID2.0是RAID技术底层数据排布方式的迭代,其上的RAID逻辑并无变化,所以RAID5还是需要1块校验盘,RAID6还是需要2块校验盘
- 说明3:RAID不能和LUN画等号。RAID 是物理层的组合,负责数据保护和性能优化;LUN 是逻辑层的划分,负责主机访问和映射。LUN基于RAID组创建,但LUN的管理独立于物理硬盘的物理限制;一个RAID组可能包含多个LUN,每个LUN可以独立映射给主机
1、分条与条带
为啥先讲这个,因为分不清分条和条带,就不能真正理解RAID1.0和RAID2.0的区别以及这么设计的原因。
1.1、关键概念澄清:
- 条带大小(Stripe Size) :每个磁盘上写入的数据块大小(条带是RAID中处理数据的基本单元)
- 分条宽度(Stripe Width) :并行写入的磁盘数量
- 分条大小(Stripe Size) :整个条带的总大小,计算公式如下:
分条大小( S t r i p e S i z e ) = 分条宽度( S t r i p e W i d t h ) × 条带大小( S t r i p S i z e ) 分条大小(Stripe\ Size)=分条宽度(Stripe \ Width)\times 条带大小(Strip \ Size) 分条大小(Stripe Size)=分条宽度(Stripe Width)×条带大小(Strip Size)

1.2、关键概念说明
-
条带(strip)在存储技术中,指硬盘中单个或多个连续扇区构成的数据单元,是组成分条的基本元素;此时也可以叫做硬盘的条带大小
-
分条(stripe)指同一硬盘阵列中多个硬盘驱动器上相同位置的条带集合,是数据分布存储的基本单位,当然,也可以叫做硬盘组条带大小,这个叫法是不是更贴切;
-
存储中条带的英文是 strip,分条的英文是 stripe,两者在存储技术中分别对应数据组织的基本单元和分布单位,分条的概念很容易和条带混淆,中文语境中经常被混在一起,导致很多人搞不明白其中关系
-
多个磁盘的条带组成一个分条,可以理解成4D+1P是5个磁盘上的五个条带组成的一根分条,数据在读写的时候是按照分条(stripe) 为单位进行读写的
例:当组建RAID时条带大小为4KiB,磁盘为5块,分条大小就是20KiB。
也就是说,当写入一个数据时,如果这个数据大于20KiB,如写入5MiB的数据,那将会分布在5个磁盘上,每个占1MiB;而当写入的数据小于20KiB,任然会分成5分分布在各个磁盘中,并且都会使用掉4KiB的空间(因为条带是RAID中处理数据的基本单元) -
4K对齐
4K对齐是指将磁盘分区的起始位置对齐到4K扇区(4096字节),以避免数据跨扇区写入导致的性能问题,其主要目的是优化单个磁盘的读写效率,减少数据跨扇区操作带来的性能损耗;SSD磁盘做4K对齐是为了兼容老系统和软件;4K对齐和条带设置没有直接关系,但是协同设置能够更好的发挥存储的性能
2、 RAID1.0的缺陷
2.1、重构效率低
RAID1.0在硬盘故障时,重构过程耗时且效率低下,原因很简单,以RAID5举例,重构硬盘无非就是依靠校验码把损坏的硬盘数据算出来。那为啥会这么慢呢?
根本原因有两点:
第一是RAID10.毫不关心条带是否已经被分配给逻辑卷,RAID1.0做恢复时需要恢复的垃圾数据太多了。如图所示,P是奇偶校验块,绿色h和蓝色的分条表示已经划分了LUN并映射给服务器使用,是有效数据,而灰色的分条和条带则是对我们无用的数据,但当我们进行数据恢复时,还是必须连无用数据(占了5分之3)一起恢复,这会大大增加恢复时间(如图中所示,其实我们想要恢复的数据只占5分之2)
第二是RAID1.0中,当做RAID5的数据恢复时,是以磁盘为单位进行恢复的,这就导致恢复时的IO受到单块磁盘IO的限制(其他盘再快也没用,数据写不进热备盘里)
2.2、资源管理与扩展性不足
RAID1.0的固定管理模式(如固定RAID组)难以适应大规模存储需求,且资源利用率低。RAID2.0通过虚拟化技术(如两层虚拟化管理模式)将存储资源池化,支持动态扩展和自动分层存储(如SSD/HDD混合使用),提升了资源利用率和灵活性
2.3 、数据可靠性与性能优化需求
RAID1.0在大容量硬盘环境下,重构过程中易因新故障导致数据丢失,且性能瓶颈明显(如热点效应)。RAID2.0通过数据分块(Chunk)和自动负载均衡技术,优化了数据分布和重构策略,降低了故障风险并提升了性能
热点效应的成因与影响
1、性能瓶颈:热点效应会导致部分磁盘负载过高,影响整体I/O性能。例如,当热点磁盘频繁读写时,其他磁盘可能因负载不足而闲置,导致整体性能下降。
2、数据丢失风险:在重构过程中,热点磁盘的频繁操作可能增加故障概率,进一步加剧数据丢失风险。例如,提到,重构时间延长和热点3磁盘的频繁操作可能增加数据丢失风险。
3、大容量环境下的挑战:在大容量硬盘环境下,热点效应更显著,因为重构时间延长(如单盘容量达10TB时,重构时间可能数倍增加),热点磁盘的负载压力更大
3、RAID2.0的核心变化
- 在RAID1.0中,条带是与物理磁盘绑定的(因为条带是同一磁盘阵列中多个磁盘驱动器上相同位置的分块),而RAID2.0中,条带不与磁盘绑定,是“浮动”于磁盘之上的。也就是同样一个条带,比如如下图所示:“D1+D2+D3+D4+P”是一个由3个DataSegment和1个Parity Segment组成。
- 在RAID1.0时,需要使用5块盘来承载这个条带。为什么?因为在此时没有人以条带为中心考虑RAID,都是以磁盘为中心,各种东西都需要绑定在盘上才能使用,盘坏了就必须一整块盘的进行重新构建。
- 而在RAID2.0时,大家以条带为中心进行设计,如下图所示,条带不在需要绑定在物理磁盘的特定位置,而是浮于磁盘表面了(可以理解成条带和磁盘解耦合了,有点像大家常说的软硬件解耦),而且都浮于表面了,自然也能“漫游(到处乱跑)”。
不过需要注意的是,即使是RAID2.0,其上层也和原来是一样的,比如一堆数据块组合成各个磁盘的条带,各个磁盘的条带又组合成分条,依然是由n个分条拼接成的逻辑空间LUN,而且和RAID1.0时一样,在新建一个逻辑卷时,系统也是尽量把组成这个逻辑卷的条带按照RAID1.0时候一样,顺序的放在磁盘上。只不过在进行数据重建时,才会采用见缝插针的方式进行数据恢复,也就是说数据恢复时我们可以利用RAID组内所有剩余空间(如图中灰色部分)进行数据恢复,这也就使得RAID2.0的数据恢复速度大大提升(因为不需要特定的热备盘,只需要热备空间,这就使得数据恢复时不受单独磁盘IO的限制,而且恢复时也只需恢复有效数据,如上图中的蓝色和绿色数据)。
例:当使用RAID2.0组成一个RAID5的组,此时有1块磁盘损坏了,我们要使用热备盘(热备空间)恢复数据,这块盘上原有的非垃圾数据块(如上图中的绿色和蓝色数据)需要被重构到热备块中去,此时系统会仅仅读出受影响条带的内容然后计算出待重构块,然后写入到与本条带其他块不共享的任意一块盘上去
注:需要提一点的是,对与RAID2.0,算法要确保同一块盘上存在同一个条带的校验块不能超过1个(单P校验,双P校验不能超过2个,如RAID6)
4、RAID2.0的不足与应对措施
为了实现条带与磁盘的解耦,我们将条带碎片化,同时因为RAID2.0上数据块组成条带时可以被放置在任意位置,这就导致我们必须想办法追踪这些数据块的实际物理位置(比如链表),但是此时映射关系不能再像RAID1.0那样通过套用某函数公式就可以简单的得出物理地址,而是必须查表,每一次IO都必须查表。同时因为表太大,无法完全缓存到内存中,只能像文件系统一样现用现缓存,这就使得原本每IO的映射消耗的算力极大的提升。
不过虽然RAID2.0会导致IO性能下降,但这种下降只是相对的下降,我们可以通过提升
CPU性能和内存来弥补(这也是为什么现在的存储CPU越配越好,内存越配越大)

2346



被折叠的 条评论
为什么被折叠?



