POPPUR爱换

标题: 一些比較性的LSI RAID Stack測試... [打印本页]

作者: per1-q1222 时间: 2011-10-10 15:07
标题: 一些比較性的LSI RAID Stack測試...
本帖最后由 per1-q1222 于 2011-10-10 15:23 编辑

此篇為LSI IR與IMR Stack之間的比較測試...
不過在此之前還是說明一些LSISAS2008相關的特徵(老話重提???)...
先看方塊圖...

可以看到有幾個部件, 大體上有一些重點:
1. 這是Software RAID, 硬凹的話, 沒意義的稱作"Hardware-assisted Software RAID", 有沒有比較好聽了一點呢?

2. Fusion MPT是一個I2O裝置, 主要拿來和Host協調.
3. 這顆有整合PPC440 533MHz IOP, 但是明確用途不知, 姑且稱作他會有副作用.
4. 2MB SRAM不是Cache喔, 請注意! 他只是單純的buffer用來存放相關的FIFO數據.
5. 那個32-bit Memory Bus是串接低速的OPB Bridge, 銜接例如FLASH, NVRAM這類等.
6. LSISAS2008的internal Bus應該是PLB4, 128-bit, crossbar架構, 寬帶其實很大.

再來看另一張比較:

這張左邊兩個當然是Intel自家開發的RAID Stack..
ERST2只會在它們自家的Server主板才看的到..
RST就應該不用說了吧..

這邊有一個重點特性, 就是IR3 RAID其實就是MegaRAID...
但是要點在於那個Persistent Controller Log...
這是一個與Event Log不同的地方..
他是Firmware Log, 這是極為有用的除錯Log....
對應LSI就是TTY log...
MegaRAID支持這項機能...
這項功能相當有用...
相關的相容性問題或著錯誤問題可以由這Log來查...

另外IR的Software Stack支持MSI-X
當然我是指6Gb/s以後的產品...
3Gb/s產品全部都只能運行在Legacy Mode...
這是一個相當重要的特徵..
雖然他不是甚麼新技術...
IR和IMR的支持有所不同...
IR提供大量的IRQ資源...

IMR比較基本面...

由於在用途上有所不同因而有差異...
LSISAS2008在IR下..
不支持Stagger Spn-up
不支持Spin-down
相關的MAID機能通通都沒有..
而在IMR下就是相反了...

下面就是不厚道的貼一部分測試..
這邊是故意拿兩顆SAS HDD來測試...
Seagate的7.2K SAS ES2...
直接就是RAID 0, 64K
ioMeter不同測試設定:
(QD深度從1個單位達到沒啥意義的256)
>>Read(讀取)

>>Write(寫入)

結果表(請點擊放大觀看):

結果不好說...

IMR的Response Time和Intterupts比IR高出不少...
其他晚點再補...

下面這個HD Tach的情況比較怪異, IR連續測了4次左右, 結果一樣, 寫入很奇怪!..
>>IMR情況

>>IR情況

歡樂的ATTO當然是少不了的, 一律直接QD10...
>>IMR情況

>>IR情況

IR的情況也同樣比較詭異...

AS SSD直接測SEQ. I/O:
>>IMR情況

>>IR情況

沒有差距太遠, IR我也是跑好幾次, 寫入似乎偏弱.....

最後的HDD Tune看看就好...
>>IMR情況

>>IR情況

作者: dracocephalum 时间: 2011-10-10 16:32
其實這是否可以說成firmware RAID?
還有是否 IMR 比較接近 MR?

作者: per1-q1222 时间: 2011-10-10 16:48

dracocephalum 发表于 2011-10-10 16:32
其實這是否可以說成firmware RAID?
還有是否 IMR 比較接近 MR?

IMR就是Integrated MegaRAID...
也就是跟MegaRAID同等的...

LSISAS2008是Software RAID, Driver-based RAID, ROM-based RAID, Firmware-based RAID等類稱呼...
反正大同小異拉...

作者: dracocephalum 时间: 2011-10-10 17:18
唉，有時候真的會弄不清楚這些 RAID 的種類，不知道這樣說對不對：
- 軟RAID，Driver based 的，就是不裝 driver 忍不了槃的那種，例如 ICH, P67
- 軟+硬 RAID，可以支持 Firmware based RAID，不裝 driver 也能夠認得了槃，不過沒有自帶 IOP (?!)，所以 RAID 5 靠 CPU? 例如 LSI SAS2008
- 全硬 RAID，有 IOP 可以算 RAID 5，不用 Host CPU 自己全部搞定，例如 LSISAS2108

作者: per1-q1222 时间: 2011-10-10 17:57

dracocephalum 发表于 2011-10-10 17:18
唉，有時候真的會弄不清楚這些 RAID 的種類，不知道這樣說對不對：
- 軟RAID，Driver based 的，就是不裝 ...

唉，有時候真的會弄不清楚這些 RAID 的種類，不知道這樣說對不對：
- 軟RAID，Driver based 的，就是不裝 driver 忍不了槃的那種，例如 ICH, P67
- 軟+硬 RAID，可以支持 Firmware based RAID，不裝 driver 也能夠認得了槃，不過沒有自帶 IOP (?!)，所以 RAID 5 靠 CPU? 例如 LSI SAS2008

"
- 軟RAID，Driver based 的，就是不裝 driver 忍不了槃的那種，例如 ICH, P67
- 軟+硬 RAID，可以支持 Firmware based RAID，不裝 driver 也能夠認得了槃
"
都要裝driver...
不管firmware-based RAID或著driver-based RAID也好..
他們全部都是Software RAID...
你可以把像ICH10或著P67這類稱為典型的ROMB RAID...
確實LSI可能在f/w封裝RAID算法..
不過這依然改變不了LSISAS2008是S/W RAID的事實...
像依照主板晶片採用的RAID..
例如Intel封裝的RST...
這類也可以稱為Firmware-based...
他依然有封入相關的RAID代碼在firmware...
不過通常是相關的啟動暫存器和相關的RAID BIOS代碼...
沒有所謂的軟+硬RAID...
稱其為H/W-assisted S/W RAID也只是針對LSI產品的特殊性...

"不過沒有自帶 IOP (?!)，所以 RAID 5 靠 CPU? 例如 LSI SAS2008"
我想你指的IOP應該是指I/O Processor..
不過LSISAS2008本身就是一種IOP...
我認為你應該要有更明確的稱呼....
Pure-H/W RAID的條件很簡單:
1. Hardware RAID Assist的存在
2. Internal MCU做為控制硬件Cache Memory的設計
3. Built-in Processor的存在
4. firmware stack的控制必須要將相關的I/O Processing轉移到RAID Controller上處理..
可以看如下這張方塊圖...
[attach]1652935[/attach]
在記憶體控制器部分..
他銜接了XOR Engine..
你可以把XOR Engine稱為XOR加速器..
這個是決定H/W RAID的最大關鍵...
根據這個設計與AMCC的PPC440spe幾乎長一個模樣..
[attach]1652948[/attach]
他連接了記憶體控器用以存取記憶體上的數據方便操作XOR operation...
另外DMA Unit部分他可能也銜接XOR有關的加速單元...
PPC440的Built-in Processor協助I/O操作處理以及其他相關特殊操作..
但他是絕對不是決定H/W RAID的關鍵點...

LSISAS2008是完整的Software RAID...
這是因為firmware控制上將相關的I/O Processing移交到host上....

LSISAS2008的Built-in Processor可能沒有甚麼作用..
當然這是我的其中猜測..!!

作者: dracocephalum 时间: 2011-10-10 18:10

per1-q1222 发表于 2011-10-10 21:57
唉，有時候真的會弄不清楚這些 RAID 的種類，不知道這樣說對不對：
- 軟RAID，Driver based 的，就是不裝 ...

了解，所以其實 RAID 只有軟件和硬件之分，軟件RAID I/O 處理會在Host發生，硬件RAID會在自身Controller處理I/O。
不過照這樣看，在RAID0/1/0+1情況下，軟件和硬件RAID之間也就沒有什麽大的區別了，只是軟件 RAID 會佔用一定的 Host Interface 帶寬，可能在最終吞吐量上比 HW RAID 要低。
那個 LSISAS2008 + PPC440 的確是極度詭異……按照software raid的説法，貌似用的還是Host CPU

作者: per1-q1222 时间: 2011-10-10 20:36

dracocephalum 发表于 2011-10-10 18:10
了解，所以其實 RAID 只有軟件和硬件之分，軟件RAID I/O 處理會在Host發生，硬件RAID會在自身Controller處 ...

PPC440可以用在別地方...

當然LSI不會講..
它們工程師只會跟我說那是它們自家的IP...

作者: readium 时间: 2011-10-11 10:15
专业讨论贴。马克一下。LZ的性能测试都是在1个HDD的情况下测的么？做RAID0或1后，IR与IMR有明显的差距么？我测的IR在低QD的情况下，RAID1 性能非常差。FW升级后有改善。

作者: per1-q1222 时间: 2011-10-11 12:50
本帖最后由 per1-q1222 于 2011-10-11 12:50 编辑

readium 发表于 2011-10-11 10:15
专业讨论贴。马克一下。LZ的性能测试都是在1个HDD的情况下测的么？做RAID0或1后，IR与IMR有明显的差距么？我 ...

這帖測試都是兩顆SAS HDD做RAID 0, 64k...
IR和IMR在RAID 0沒甚麼特殊差距...
但是寫入性能似乎有差異..
這部分我晚上還要再測一次...
而且ioMeter的情況有些不同

欢迎光临 POPPUR爱换 (https://we.poppur.com/)