|
||
|
Regular Member
 加入日期: Dec 2006 您的住址: 桃園
文章: 50
|
老AHA RAID 3210S的絕地大反攻
為何會下這個標題 ， 其實是在一連串神奇的事情發生之後 。 突然發現原來多年的老卡，其實也是不輸給現代的陣列卡的。
大家如果有空 ， 就聽聽這個故事吧 。 因為第一次PO，所以麻煩大家看Giga的網路相簿了，我用Hinet試過，可以連。地址是photo.giga.net.tw/album/17223/有時不太好用就是了。 看附件也行 如果大家有印像 ， 在幾年前有一張很有名的RAID Card 叫做3210S ， 是一張用上80303 的2CH U160 Hardware RAID 。 而有幸用上它的人相信對於Windows的SCSI RAID Write Cache Disable 的超級大Bug，深感頭痛。明明單讀或單寫，可以輕易跑出100MB/S的水準。偏偏對拷的時候就跟殘廢一樣。 對於這種狀況，相信大家只有三種解法。一是分散IO、二是忘了SCSI的存在、三是換成沒這種Bug的RAID Card。 在幾年前實在沒的選擇，我是選擇用兩張3210配兩組(4X10K)的RAID0陣列來降低這個影響，後來I-RAM及15K.3出來以後。在將其中一組OS用的4X10K給換成了4X15K.3來跑，SWAP及TEMP交給4G的I-RAM。基本上我也就忘了這個Windows的死Bug。反正Hitachi的Case夠大、Power夠強。再用兩顆IDE來Ghost Data及OS，其實也很穩固。 陣列組及HDD群的圖：相簿3210-1及3210-2 Hitachi的Case：相簿Hitachi 本來我跟同事用這兩臺怪物用的粉高興，可是不幸的。主機板在最近駕鶴西歸了。 這下糗大，只好找新的解法。 結果同事決定不跟SCSI搞了，換成10K的SATA加965的MB。我決定繼續這樣用，反正用ASUS的P5WDG2 WS PRO ， 3210S就可以繼續用(其實是我懶的搞)。 當然965是最快搞定的，一趟光華就解決了。 965的板子965DQ6，HDD們 WD 的暴龍36G 10K SATA，RAID0就用ICH8。 圖：相簿965 結果系統測起來 Read可以到240MB/S、Write可以到200MB/S，同RAID大檔對拷70MB/S。 哇，強到有找。同RAID大檔對拷快跟我跨卡大檔對拷一樣快了。 這時後，有人在笑了。說我迷信15K。SCSI的神話早就消滅了。 嗯。我倒蠻同意的。反正我只是懶而已。 可是一開始用來工作。 耶、怪怪的，好像跟舊的一樣慢，而且還會頓頓的。沒關係，反正E6600不超頻，跟P4 3.2本來就差不了多少。 而且10K的SATA本來就比15K的SCSI SeekTime來的慢。 可是等我的P5WDG2 WS PRO到了。 圖：相簿ASUS 測了一下PCMARK ，嗯蠻差的。 Read 140MB/S、Write 120MB/S，同RAID大檔對拷44MB/S。跨RAID 110 MB/S。不過怪怪的，之前同RAID大檔對拷應該只有20MB/S而已阿??。 可是一用來工作。同一組Source進行編成，嘿嘿。電好玩的。而且完全不會頓。基本上比舊主機快上40%。不愧是控肉阿。尤其在編成前置作業時，幾近零等待。 可是不對阿，大家都是控肉阿。難道965、975差那麼多。 這下不找一下原因不行了，所以大家挖了一個週末。小測了一下。 先說明一下硬體配置 SATA組 MB GigaByte P965-DQ6 CPU E6600 4M 1066外頻(2.4G無超頻，天底下沒人工作機超頻的吧) RAM 1G X 4 DDR2 667 主記憶體 HDD WD36G X 4 以OnBoard ICH8R 做4 X RAID0 SCSI組 MB ASUS P5WDG2 WS PRO CPU E6600 4M 1066外頻，2.4G無超頻 RAM 1G X 4 DDR2 667 主記憶體 HDD 4顆 Seagate 18G 15K.3 以64MB Writback Cache 3210S 跨通道建 4 X Raid0 友情贊助組 有人贊助SRCU42X(128M Writback)來當對照組，基本上這一張號稱是沒有Write Cache Disable 的Bug。其它東西延用SCSI組 圖：相簿SRCU42X 軟體部份分別測 Server 2003 X 64 R2、Server 2003 R2 X32 、 Vista X32中文版 。 其中3210及ICH8R RAID都打開寫入快取及磁碟進階效能。SRCU42X則只能選打開寫入快取。 測法是於同RAID複製 大檔 ( 7.54G 12個檔 )、小檔( 9.12G 31838個檔 )。 並於Server 2003 X 64 R2加計 OS的效能計數器。其中965只測 Server 2003 X 64 R2，因為他不想重灌。 OK 結果如下 檔案複製部份。 ICH8R 3210S SRCU42X Server 2003 X32大檔 NA 188S 122S Server 2003 X32 小檔 NA 502S 370S Server 2003 X64大檔 142S 190S 126S Server 2003 X64小檔 518S 505S 501S Vista X32大檔 NA 96S 114S Vista X32小檔 NA 512S 544S 哇，3210S竟然在VISTA幾近追過SRCU42X，在其他OS也輸的不多。跟ICH8R更是互有勝負。微軟是發瘋替3210S重新寫Driver是吧。 可是問題來了，ICH8R如果跟SRCU42X比，那結果是可以理解。可是為啥會輸3210S勒。因為進行編成的時後，大小檔都會用到阿。雙方應該是抓平才對阿。 接下來就要研究Log了。 OK。基本上我們記錄了 R/S、W/S、中斷/S、AVG CPU、AVG IO Q 等五項值。 接下來往下看這些數據。 965 Big Output 56.6MB/S R 857 次/S 66K/次 W 858次/S 66K/次 中斷 6119次/S 9.2K/次 AVG CPU 9.2 AVG Q 0.91 Small Output 61File/S R 436 次/S 0.14File/次 W 348次/S 0.17File/次 中斷 4032次/S 0.015File/次 AVG CPU 6.6 AVG Q 3.3 3210S Big Output 43MB/S R 656 次/S 65K/次 W 656次/S 65K/次 中斷 2334次/S 18.4K/次 AVG CPU 7 AVG Q 1 Small Output 58File/S R 444 次/S 0.13File/次 W 352次/S 0.17File/次 中斷 2228次/S 0.026File/次 AVG CPU 6 AVG Q 1.1 SRCU42X Big Output 66MB/S R 1008 次/S 65K/次 W 1007次/S 65K/次 中斷 5329次/S 12.4K/次 AVG CPU 9.5 AVG Q 11.5 Small Output 86File/S R 609 次/S 0.14File/次 W 481次/S 0.17File/次 中斷 3582次/S 0.024File/次 AVG CPU 7.4 AVG Q 8.9 OK 到此就可以看出原因了，ICH8R每一個命令太沒效率了。尤其是中斷。難怪在進行編成時，會先頓好一下，CPU才會拉起來，而且高高、低低的。而用3210的機子，一編成CPU馬上拉到100%。所以就差在這。 至於SRCU42X，應該是Cache太少(應該至少要512M)，而且用的不熟練所致。不然應該是巴大家巴好玩的。只是它一個中斷的的效益也不高。在本來就全CPU負載的情形下，能佔3210S多少的便宜也是問題。不過要做一套工作環境要花上個一天，所以就沒測了。 當然黑暗的原力是不會輕易放棄，他補下單了一張Promise的EX4350，準備展開反攻。如果有機會再來測吧。 畢竟965的4X PCI-E是出名的容易有問題。 所以結論就是，趕快把廢物箱裏的3210S挖出來吧。現在看來至少在2003 X32/X64及Vista X32已經解了這張卡的Write Cache Disable 的Bug。 解開Write Cache Disable的圖 3210解開的圖：相簿S2003-X32-3210-disk-set、X64-3210-disk-set、vista-3210-disk-set.jpg 此文章於 2007-01-05 08:29 AM 被 chin-4696443 編輯. |
|||||||
2007-01-05, 08:24 AM
#1
|
|
|
Junior Member
  
加入日期: Feb 2005 您的住址: 桃園楊梅
文章: 863
|
__________________
10年過去了，PCDVD依然活得好好的 |
||
|
2007-01-05, 09:22 AM
#2
|
|
|
Master Member
加入日期: Apr 2002 您的住址: 新竹市
文章: 1,533
|
好像有ram的RAID卡都沒有Write Cache Disable 的Bug
我是使用ibm serverraid 6m 256m的快取 不管使用2003 or xp 對考 4.5g的檔案大概都在60sec可以拷完 約75mb/s 這個跟你差不多 我的是15000rpm 2顆組raid 0
__________________
我的MSN:[email protected] 耳擴:M3 & Head Box 耳機:HD650(Opus2魔豆線) , CM7 TI , EW9 , EC7 音效卡:Prodigy 7.1 + Fubar USB DAC:SPITFIRE 線材:APOGEE WYDE EYE數位線 賀2005/1/19日進入排名5000名,2007/1/23日終於進入排名1000 UD 200萬達成(2005/9/14), 慶祝300萬達成2006/07/11,2007/1/13達到400萬 ,持續往500萬挺進 
|
|
2007-01-05, 06:46 PM
#3
|
|
|
Regular Member
加入日期: Dec 2006 您的住址: 桃園
文章: 50
|
TO chunyan0001
感謝你的教學,其實平常是有公司的1M Fiber可以用.只是最近因為海欖問題,被調去做專線的備援了.不然圖是可以放在公司的網路上. TO jomn 我補試了一下手上的WinXp 零版 , 這張3210S 是有Write Cache Disable問題的. 而且之前 . 剛配置此此卡時是用Windows 2000 SP4 . 也確定是僅 20MB / S (同RAID對拷) 至於MS到何時解掉3210S這個問題,就不明了. 因為手上只剩 Server 2003及Vista和XP 零版 . 其他都回收了 . 另外 那張SRCU42X的主人 . 之前是用Elite 1600 . 這張卡連在Server 2003 X 64 or Vista 下都無法啟用 Write Cache . 他用兩門 15K.4 做RAID0 , 對拷也超不過 30MB/S . 同一OS . 用Ghost移到 SRCU42X上 , 馬上破 70MB . 所以基本上Elite 1600 是有這個問題的 另外各位先進有試過替SRCU42X加到512M Cache , 速度提昇的效果好嗎 ??? 如果有先進測過 , 麻煩可以提供經驗 供參考嗎 . 畢竟以 P5WGD2 + SRCU42X 沒理由僅止於此 . SRCU42X的問題出在設定上的可能性居大. |
|
2007-01-05, 08:19 PM
#5
|
|
|
Master Member
加入日期: Apr 2002 您的住址: 新竹市
文章: 1,533
|
這樣喔 因為之前看過有人討論過這個問題
有人提到說 含RAM的RAID卡可以解決這個問題 看來也不是很完美解決 只是剛好入手一塊RAID卡 測過後覺得 好像真的沒問題 2003 和 XP 我都測過
__________________
我的MSN:[email protected] 耳擴:M3 & Head Box 耳機:HD650(Opus2魔豆線) , CM7 TI , EW9 , EC7 音效卡:Prodigy 7.1 + Fubar USB DAC:SPITFIRE 線材:APOGEE WYDE EYE數位線 賀2005/1/19日進入排名5000名,2007/1/23日終於進入排名1000 UD 200萬達成(2005/9/14), 慶祝300萬達成2006/07/11,2007/1/13達到400萬 ,持續往500萬挺進
|
|
2007-01-05, 08:52 PM
#6
|
|
|
Regular Member
加入日期: Dec 2006 您的住址: 桃園
文章: 50
|
To jomn
這就是我提到的 無此Bug的特殊RAID卡 基本上我目前僅看過SRCU42X在XP SP1 下也是毫無問題 , 雖然不能選磁碟進階效能 . 至於目前我看過的其它卡 , 基本上在XP SP1全掛. 包含 3210 3400 S2000 S2010 MegaRaid Elite 1600 Mylex E2000 等 聽說 XP在SP2 , Server 2003在R2 . MS重寫了miniPort SCSI 有修掉 Cache 問題. 可是卡也得要更新 Driver配合才行.至於Vista 整個Scsi子系統都換了.好像是從底層就解決了 . |
|
2007-01-05, 09:08 PM
#7
|
|
|
Regular Member
加入日期: Dec 2006 您的住址: 桃園
文章: 50
|
感謝 chunyan0001
補圖 965測試組  3210測試組及陪榜的I-RAM. 其實I-RAM最強 可惜沒個32G   scsi的測試用版  陪榜的SRCU42X  3210在各OS的 IO setting X32 2003 R2  X64 2003 R2  Vista 32  |
|
2007-01-05, 09:36 PM
#8
|
|
|
*停權中*
加入日期: Dec 2002 您的住址: 繁星居
文章: 4,079
|
好專業的測試丫 讚!..............
|
|
2007-01-05, 11:03 PM
#9
|
|
|
Major Member
 加入日期: Sep 2001
文章: 274
|
AHA RAID 3210S ?? ASR 3210S ?? 哪個才對 ??
|
|
2007-01-06, 06:27 AM
#10
|
|
