PCDVD數位科技討論區
PCDVD數位科技討論區   註冊 常見問題 標記討論區為已讀

回到   PCDVD數位科技討論區 > 電腦硬體討論群組 > 儲存媒體討論區
帳戶
密碼
 

  回應
 
主題工具
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
服務器&EXSI&陣列卡的疑問,求VXR等有經驗高手們關注。

最近淘到了一套服務器平台配置為W5580*2+INTEL 5520HC+96G內存的平台。準備安裝EXSI做一堆虛擬機使用,現有另一台PC裝了一張DELL H700陣列卡做R5、R1等放數據。準備把陣列卡和硬盤移到這個新平台使用,但暫時還沒敢弄。因為有以下疑問。

1、現有陣列放到EXSI裡面會能正常使用?有什麼要注意的?

2、同一個平台能否裝兩張陣列卡?因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?不能的話各高手們的解決方案是怎樣的?

3、若能裝兩張陣列卡,準備一張H700再內部使用接8嗰硬盤,一張H800接外部陣列柜存其他數據,這方式能否可行??
     
      
舊 2016-09-29, 12:24 AM #1
回應時引用此文章
hkjytkd離線中  
vxr
Elite Member
 
vxr的大頭照
 

加入日期: May 2002
您的住址: 地球的上面..
文章: 5,852
Exclamation

引用:
作者hkjytkd
最近淘到了一套服務器平台配置為W5580*2+INTEL 5520HC+96G內存的平台。準備安裝EXSI做一堆虛擬機使用,現有另一台PC裝了一張DELL H700陣列卡做R5、R1等放數據。準備把陣列卡和硬盤移到這個新平台使用,但暫時還沒敢弄。因為有以下疑問。

1、現有陣列放到EXSI裡面會能正常使用?有什麼要注意的?

2、同一個平台能否裝兩張陣列卡?因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?不能的話各高手們的解決方案是怎樣的?

3、若能裝兩張陣列卡,準備一張H700再內部使用接8嗰硬盤,一張H800接外部陣列柜存其他數據,這方式能否可行??

"1、現有陣列放到EXSI裡面會能正常使用?有什麼要注意的?"
你不需要在乎array是否是甚麼樣的系統平台...

"2、同一個平台能否裝兩張陣列卡?因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?不能的話各高手們的解決方案是怎樣的?"
"同一個平台能否裝兩張陣列卡?"
yes, 但是這得視主機板而定...
"因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?"
我想你指的直通應該是passthrough...
VMware的DP I/O可以進行這個操作...
另外一個議題是較有優勢性的SR-IOV..
因為他可以一對多...
這兩者對於硬體架構都有一定的要求..
SR-IOV啟動要求是頗嚴苛的...
他需要host adapter都支持...
所以LSISAS2108(H700, H800)的產品全部通通被打槍...
你只能使用DP I/O操作一對一的mapping...
ABOUT DP I/O:
https://kb.vmware.com/selfservice/m...ernalId=1010789

"3、若能裝兩張陣列卡,準備一張H700再內部使用接8嗰硬盤,一張H800接外部陣列柜存其他數據,這方式能否可行??"
可行..
不過添購SAS Expander是比較好的方法....
但是我印象H700對於external device是蠻多限制的...
 
__________________
舊 2016-09-29, 08:25 AM #2
回應時引用此文章
vxr離線中  
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
引用:
作者vxr
"1、現有陣列放到EXSI裡面會能正常使用?有什麼要注意的?"
你不需要在乎array是否是甚麼樣的系統平台...

"2、同一個平台能否裝兩張陣列卡?因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?不能的話各高手們的解決方案是怎樣的?"
"同一個平台能否裝兩張陣列卡?"
yes, 但是這得視主機板而定...
"因有多個虛擬機,其中包含NAS,route系統,上網專用系統、WEB服務器、流媒體服務器等等。若能裝兩張陣列卡能否直通到不同的系統使用?"
我想你指的直通應該是passthrough...
VMware的DP I/O可以進行這個操作...
另外一個議題是較有優勢性的SR-IOV..
因為他可以一對多...
這兩者對於硬體架構都有一定的要求..
SR-IOV啟動要求是頗嚴苛的...
他需要host adapter都支持......



1.沒看明白是什麼意思,V大能否進一步說明一下?

2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?

我以前看到的說EXSI直通的就是用passthrough這個單詞的。我之前爬文學習到的對直通的理解是將一個實體設備分配到一個虛擬機系統裡面單獨使用,而不是多機共用。例如圖形顯示卡、USB控制器之類,聽得比較多的是圖形顯示卡,因為曾經有一段時間比較多人玩EXSI做ALL in ONE同時做HTPC,NAS,路由等工作。在VMWARE STATION系統中直通需要CPU和主板均支持VT-D才能啟用的,但到EXSI就沒太懂了。

根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。

3.方式可行的話就可以嘗試了~關於SAS Expander這設備我查了一下價錢範圍比較大喔~由100+RMB~3000+RMB均有~能否推薦一下?我看到這類設備也有分8088/8087輸入級聯的,接硬盤均是用8087在接背板或者接8087-SAS線來接硬盤。但用SAS EXPANDER需和主機共用一個機箱和電源,空間貌似不太夠用。

我本來的構思是使用H700存放EXSI中虛擬系統的系統數據和一些公用資料,H800直通到NAS系統,通過8088線接陣列柜來存放數據,用陣列柜是考慮到與主機不是共用電源,貌似比較保險點,陣列柜的選型暫時有DELL PowerVault MD1000和Rackable 的嗰不知型號的3U陣列柜。Rackable 的陣列柜如下圖,其中DELL的MD1000沒能看清楚接口方式,不知怎樣和H800連接,Rackable 的那個就應該可以直接通過8088的線連接到H800並且可以級聯,不過能否支持H800連接到Rackable 就不清楚了。不知V大有沒有試過這類設備?
上傳的圖像
文件類型: jpg Rackable.jpg (192.0 KB, 294次瀏覽)
舊 2016-09-29, 09:28 PM #3
回應時引用此文章
hkjytkd離線中  
vxr
Elite Member
 
vxr的大頭照
 

加入日期: May 2002
您的住址: 地球的上面..
文章: 5,852
Exclamation

引用:
作者hkjytkd
1.沒看明白是什麼意思,V大能否進一步說明一下?

2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?

我以前看到的說EXSI直通的就是用passthrough這個單詞的。我之前爬文學習到的對直通的理解是將一個實體設備分配到一個虛擬機系統裡面單獨使用,而不是多機共用。例如圖形顯示卡、USB控制器之類,聽得比較多的是圖形顯示卡,因為曾經有一段時間比較多人玩EXSI做ALL in ONE同時做HTPC,NAS,路由等工作。在VMWARE STATION系統中直通需要CPU和主板均支持VT-D才能啟用的,但到EXSI就沒太懂了。

根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。

3.方式可行的話就可以嘗試了~關於SAS Expander這設備我查了一下價錢範圍比較大喔~由100+RMB~3000...

"1.沒看明白是什麼意思,V大能否進一步說明一下?"
怎樣的RAID形式、配置..
並不對於任何平台產生依賴..
需要在乎的是ESXi提供的LSI RAID driver能不能正確載入DELL H700/H800
但是我想應該是毫無問題..

"2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?"
這要看主機板的BIOS ROM資源是否足夠給雙卡使用..

"根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。"
不管是DP I/O或著SR-IOV對於主機板以及CPU皆提供對硬體虛擬化技術的要求..
SR-IOV比較難搞的是, 對於終端硬體的硬體虛擬化也提供了要求..
DP I/O就是一對一的mapping..
SR-IOV的優勢是可以配置多個VF針對多個guest提供個別的mapping(一對多)..
能有效妥善利用硬體資源..
對於LSI MR RAID來說, 支持SR-IOV能夠有效使用RoC的硬體資源...
LSISAS2108不支持SR-IOV, 你只能使用DP I/O
但是LSISAS2208/3108是否支援SR-IOV..
這也得問一下LSI, 前幾年LSI跟我說不支援..
可是現在不好說了

"3.方式可行的話就可以嘗試了~關於SAS Expander這設備我查了一下價錢範圍比較大喔~由100+RMB~3000+RMB均有~能否推薦一下?我看到這類設備也有分8088/8087輸入級聯的,接硬盤均是用8087在接背板或者接8087-SAS線來接硬盤。但用SAS EXPANDER需和主機共用一個機箱和電源,空間貌似不太夠用。"
你可以說明你想使用甚麼樣的機箱..
再來談SAS Expander的配置..
__________________
舊 2016-09-29, 10:58 PM #4
回應時引用此文章
vxr離線中  
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
引用:
作者vxr
"1.沒看明白是什麼意思,V大能否進一步說明一下?"
怎樣的RAID形式、配置..
並不對於任何平台產生依賴..
需要在乎的是ESXi提供的LSI RAID driver能不能正確載入DELL H700/H800
但是我想應該是毫無問題..

"2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?"
這要看主機板的BIOS ROM資源是否足夠給雙卡使用..

"根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。"
不管是DP I/O或著SR-IOV對於主機板以及CPU皆提供對硬體虛擬化技術的要求..
SR-IOV比較難搞的是, 對於終端硬體的硬體虛擬化也提供了要求..
DP I/O就是一對一的mapping..
SR-IOV的優勢是可以配置多個VF針對多個guest提供個別的mapping(一對多)....


1.大致明白了,感謝V大的解答,就等測試了。

2.可以怎樣去看BIOS ROM是否有資源呢?

3.機箱現時已經在用,是星宇泉的全塔核弹3号,有三個光驅位,已經被我換成一個3轉5的硬盤籠子,加上原有的7嗰硬盤位置一共可以裝12嗰硬盤,不過貌似不太夠用~並且考慮太多硬盤接同一個機箱感覺有點危險,雖然電源用的是長城巨龍的1250W的模組電源。所以才考慮是不是要用外接硬盤柜。
舊 2016-10-04, 05:49 PM #5
回應時引用此文章
hkjytkd離線中  
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
引用:
作者vxr
"1.沒看明白是什麼意思,V大能否進一步說明一下?"
怎樣的RAID形式、配置..
並不對於任何平台產生依賴..
需要在乎的是ESXi提供的LSI RAID driver能不能正確載入DELL H700/H800
但是我想應該是毫無問題..

"2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?"
這要看主機板的BIOS ROM資源是否足夠給雙卡使用..

"根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。"
不管是DP I/O或著SR-IOV對於主機板以及CPU皆提供對硬體虛擬化技術的要求..
SR-IOV比較難搞的是, 對於終端硬體的硬體虛擬化也提供了要求..
DP I/O就是一對一的mapping..
SR-IOV的優勢是可以配置多個VF針對多個guest提供個別的mapping(一對多)....



另外再請教V大一個問題~我原來的H700接了4嗰4T WD的紅盤做R5~現在容量不太夠了~想增加空間~不知您的建議是怎樣做好點?以前爬文發現直接在線增加硬盤貌似危險度比較高~很多建議都是先建另一個R5做好之後再往裡面灌數據~不過要另建一個多於4嗰4T的紅盤結構的R5買硬盤也夠嗆的。。。。不知有沒有別的比較安全的辦法~??
舊 2016-10-06, 01:42 PM #6
回應時引用此文章
hkjytkd離線中  
misman+++
Master Member
 

加入日期: Apr 2015
文章: 1,523
引用:
作者hkjytkd
另外再請教V大一個問題~我原來的H700接了4嗰4T WD的紅盤做R5~現在容量不太夠了~想增加空間~不知您的建議是怎樣做好點?以前爬文發現直接在線增加硬盤貌似危險度比較高~很多建議都是先建另一個R5做好之後再往裡面灌數據~不過要另建一個多於4嗰4T的紅盤結構的R5買硬盤也夠嗆的。。。。不知有沒有別的比較安全的辦法~??


關機。加上硬碟,去做RAID 5 延展即可。(H700 內接我有接過8個(分2線)。)
舊 2016-10-06, 03:32 PM #7
回應時引用此文章
misman+++離線中  
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
引用:
作者misman+++
關機。加上硬碟,去做RAID 5 延展即可。(H700 內接我有接過8個(分2線)。)

感謝你的建議~不過這方式不就是在線擴展硬碟的方式么?操作會危險么?很擔心數據會丟失~
舊 2016-10-12, 02:44 AM #8
回應時引用此文章
hkjytkd離線中  
hkjytkd
New Member
 

加入日期: Mar 2014
文章: 8
引用:
作者vxr
"1.沒看明白是什麼意思,V大能否進一步說明一下?"
怎樣的RAID形式、配置..
並不對於任何平台產生依賴..
需要在乎的是ESXi提供的LSI RAID driver能不能正確載入DELL H700/H800
但是我想應該是毫無問題..

"2.用雙陣列卡一般是可以的,但具體要看主板是否支持?我這樣理解有沒有錯?"
這要看主機板的BIOS ROM資源是否足夠給雙卡使用..

"根據V大貼出的資料直通可以使用VMWARE提供的DP I/O和SR-IOV,但因為陣列卡使用的是H700/H800~硬件限制不能使用SR-IOV,只能使用DP I/O?我看了你貼出來的地址資料貌似操作好簡單喔。"
不管是DP I/O或著SR-IOV對於主機板以及CPU皆提供對硬體虛擬化技術的要求..
SR-IOV比較難搞的是, 對於終端硬體的硬體虛擬化也提供了要求..
DP I/O就是一對一的mapping..
SR-IOV的優勢是可以配置多個VF針對多個guest提供個別的mapping(一對多)....



V大,關於H700的使用方案爬文后結合你建議使用SAS擴展卡的方式想了一個可行的方案,H700有兩個8087接口,均接8087轉8088的轉接卡一個接外部的陣列柜,另一個接SAS擴展卡,貌似找到LSI的SAS擴展卡都是用8088接口?這方式是不是直接換一套H800更好?H700和H800除接口外還有那些分別??我只知H700和H800的接口一個是8087另一個是8088~軟件支持方面貌似都是一樣~CC也只能支持1.1~緩存和BBU貌似都是通用的。
舊 2016-10-12, 02:52 AM #9
回應時引用此文章
hkjytkd離線中  
vxr
Elite Member
 
vxr的大頭照
 

加入日期: May 2002
您的住址: 地球的上面..
文章: 5,852
Exclamation

引用:
作者hkjytkd
V大,關於H700的使用方案爬文后結合你建議使用SAS擴展卡的方式想了一個可行的方案,H700有兩個8087接口,均接8087轉8088的轉接卡一個接外部的陣列柜,另一個接SAS擴展卡,貌似找到LSI的SAS擴展卡都是用8088接口?這方式是不是直接換一套H800更好?H700和H800除接口外還有那些分別??我只知H700和H800的接口一個是8087另一個是8088~軟件支持方面貌似都是一樣~CC也只能支持1.1~緩存和BBU貌似都是通用的。

"V大,關於H700的使用方案爬文后結合你建議使用SAS擴展卡的方式想了一個可行的方案,H700有兩個8087接口,均接8087轉8088的轉接卡一個接外部的陣列柜,另一個接SAS擴展卡,貌似找到LSI的SAS擴展卡都是用8088接口?"
連接expander card可能需要注意相容性問題...
你可以參考intel的expander card..
但我記得他跟DELL的PERC不是說很完好相容...
建議的方案還是帶expander的陣列柜...
你有考慮更換機箱嗎?
__________________
舊 2016-10-12, 10:22 AM #10
回應時引用此文章
vxr離線中  


    回應


POPIN
主題工具

發表文章規則
不可以發起新主題
不可以回應主題
不可以上傳附加檔案
不可以編輯您的文章

vB 代碼打開
[IMG]代碼打開
HTML代碼關閉



所有的時間均為GMT +8。 現在的時間是03:57 PM.


vBulletin Version 3.0.1
powered_by_vbulletin 2021。