热备份是做什么用的？

fly-fox

你的“是因为r5的一块盘挂掉后，磁盘系统的性能急剧下降，其读写压力猛增”
我的反对你这句的话是“r5在读数据时本身就是要效验的，所以不存在挂了一个盘之后，读写压力猛增”
论点在“读写压力猛增”，并不是在 ...
bcyj 发表于 2009-6-9 17:38

数据的校验不是读同步进行，系统会自动根据压力调整校验的时间。所以这个开销基本可以无视。
坏盘以后的读取和XOR是不同的，是一定要做的，否则根本拿不到数据。
如果你的盘数少，那么相对的读压力的增长大；如果你的盘数多，那么XOR的开销就大，系统压力的增加是免不了的。
当然如果你系统的压力本来就小，那就根本看不出这种变化。

bcyj

数据的校验不是读同步进行，系统会自动根据压力调整校验的时间。所以这个开销基本可以无视。
坏盘以后的读取和XOR是不同的，是一定要做的，否则根本拿不到数据。
如果你的盘数少，那么相对的读压力的增长大；如果 ...
fly-fox 发表于 2009-6-9 17:53

前提你说的可以进行热备重建的压力下，连续不间断的极限读，重建一样不能进行，所以在可以重建的情况下，读写的数据量和io数相同，压力是一样的

fly-fox

说的是你的“在通常情况下，读不需要做XOR，而且少读一块盘”
我的是说如果5块盘的raid5,在不需要校验时，读取一次数据，需要读取多少个盘，这个概率和4盘的raid0是一样的，可能1个盘到4个盘，而不是你的“少读一 ...
bcyj 发表于 2009-6-9 17:53

我知道你想要说什么了，你觉得如果文件系统的Block Size小于设置的Strip Size的时候，只会读一块盘，所以会出现盘数的概率。
我想说的是，这种情况在生产系统中是不可能出现的，总线很可能吃不饱，严重影响性能。当有数据请求的时候，系统会一次取出相关数据放进缓存（具体逻辑具体到厂商有所不同），所以基本上5盘的R5一次读就是4块盘，5盘的R0一次读就是5块盘。

bcyj

我知道你想要说什么了，你觉得如果文件系统的Block Size小于设置的Strip Size的时候，只会读一块盘，所以会出现盘数的概率。
我想说的是，这种情况在生产系统中是不可能出现的，总线很可能吃不饱，严重影响性能。 ...
fly-fox 发表于 2009-6-9 18:04

不是你说的这样，那两个帖子说的主题不一样，一个是针对持续速度的(小带条)，一个是针对iops的(大带条)
然后，里面的这个链接有图片，可以方便你的理解http://storageadvisors.adaptec.c ... -right-stripe-size/

fly-fox

前提你说的可以进行热备重建的压力下，连续不间断的极限读，重建一样不能进行，所以在可以重建的情况下，读写的数据量和io数相同，压力是一样的
bcyj 发表于 2009-6-9 17:59

这个RAID卡是有设置的，可以设定Rebuild的优先级，像HP的卡就有Low，Middle，High三个级别，更重要的是，系统的压力之持续Rebuild的这段时间，而没有Hot Spare，这会一直持续到你换盘并Rebuild为止。
还有一点，就是当你设置了Hot Spare之后，系统应该在这块盘上做了动作，在挂盘的情况下，尽量缩短Rebuild的时间。

bcyj

这个RAID卡是有设置的，可以设定Rebuild的优先级，像HP的卡就有Low，Middle，High三个级别，更重要的是，系统的压力之持续Rebuild的这段时间，而没有Hot Spare，这会一直持续到你换盘并Rebuild为止。
还有一点，就 ...
fly-fox 发表于 2009-6-9 18:08

不要想当然，从原理上说，你觉得这热备盘可以做什么动作？可以预测那块盘会坏？如果这盘能有动作的就是raid6类的了
单位时间内读写数据量和io数相同，压力相同

fly-fox

不要想当然，从原理上说，你觉得这热备盘可以做什么动作？可以预测那块盘会坏？如果这盘能有动作的就是raid6类的了
单位时间内读写数据量和io数相同，压力相同
bcyj 发表于 2009-6-9 18:12

呵呵，事先声明，我也只是猜想，没有理论支持啊。猜想的理由很简单，就是我发现，Hot Spare那块盘的灯，会周期性的亮。
如果有动作，肯定不会跟写数据同步啊，肯定像数据校验一样，异步做啊，减少系统压力啊。

bcyj

呵呵，事先声明，我也只是猜想，没有理论支持啊。猜想的理由很简单，就是我发现，Hot Spare那块盘的灯，会周期性的亮。
如果有动作，肯定不会跟写数据同步啊，肯定像数据校验一样，异步做啊，减少系统压力啊。
fly-fox 发表于 2009-6-9 18:23

周期性亮是因为要定性检测那盘有没有挂，如果挂了就报警

fly-fox

周期性亮是因为要定性检测那盘有没有挂，如果挂了就报警
bcyj 发表于 2009-6-9 18:25

但是如果一块盘只是online，没有加入到VD的话，是不会亮的。这个只是猜测，没有理论依据，就到这里。
看了你在那两个帖子里的回复，发现有一个看法是错误的。
“iops本来就是随机的,每个盘的iops都是相应固定的,所以理论上最高iops就是单盘的iops x盘数,那么raid时要尽量靠近理论上的最高iops的方法,就是尽量让每次的io请求只由一个单独的盘去响应.条带越小,一次io请求由多盘响应的机会越大,iops越低(越接近单盘的iops)关于例子,这只是一个例子,这里说的其实就是一个io请求的数据量,而不是上层的api”
对于存储系统来说，就是希望每次的IO请求有尽可能多的盘相应到，这时整个系统的IOPS最高，这也是为什么一般情况下，RAID0，5的盘数越多，性能越好。为什么这么说？这是因为受限于机械结构，单块硬盘的IOPS是远小于总线带宽的，所以如果存储子系统只有一块硬盘，其总线是吃不饱的，只有在多磁盘系统中，多块磁盘同时读取数据时，IOPS才能尽可能的最大化。

bcyj

但是如果一块盘只是online，没有加入到VD的话，是不会亮的。这个只是猜测，没有理论依据，就到这里。
看了你在那两个帖子里的回复，发现有一个看法是错误的。
“iops本来就是随机的,每个盘的iops都是相应固定的, ...
fly-fox 发表于 2009-6-9 20:55

你没认真看完那个帖子，所以你的看法完全错误，请重新看，把持续速度和iops搞清楚，或者参考这个文章
http://storageadvisors.adaptec.com/2006/06/05/picking-the-right-stripe-size/

fly-fox

你没认真看完那个帖子，所以你的看法完全错误，请重新看，把持续速度和iops搞清楚，或者参考这个文章
http://storageadvisors.adaptec.com/2006/06/05/picking-the-right-stripe-size/
bcyj 发表于 2009-6-10 08:48

首要的问题是你是否认可对于RAID0，是不是盘数越多，性能越好（先不说RAID5，也不考虑系统带宽）？这个问题和Strip Size是没有关系的。如果你对这个问题不认可，那就无法讨论了，因为你的基本观点就是错的。

bcyj

首要的问题是你是否认可对于RAID0，是不是盘数越多，性能越好（先不说RAID5，也不考虑系统带宽）？这个问题和Strip Size是没有关系的。如果你对这个问题不认可，那就无法讨论了，因为你的基本观点就是错的。
fly-fox 发表于 2009-6-10 09:19

raid0的总体性能当然越多盘越好（寻道性能不变，持续和iops更加）
但这个和你的错误的观点根本不是一个点上的东西，请重新从头到尾认真看那两个帖子，理论已经说的很详细了，第一个帖子是主要讨论持续速度的，第二个帖子主要就是iops

bcyj

发现你不知道iops是什么。。。io per/sec, 每秒io操作数

93blue

bcyj   真是硬盘专家啊   太强了

现在难得有这么好的技术贴了，讨论氛围又浓

zgw3

是啊，我好多问题都是找bcyj的，呵呵，麻烦他了