瀏覽單個文章
thx
Major Member
 

加入日期: Jun 2000
您的住址: Taipei
文章: 288
引用:
作者k12345c
請問兩張infiniband HCA 直接對接,需要哪種排線??
一般的CX4 cable 還是要跳線??


這句是大哉問...
厚厚破千pages infiniband說明書不是人看的. 也google 不到啥資訊
(找人問? .%$^#$% )

一般"正常狀況下"

都會有硬體 infniband switch ,但一台怎樣買都要8 port nt 4萬以上
我們可沒有那樣多電腦要接 用了也浪費

當初試了老半天..
二臺直接對接用一般CX4 Cable 燈號有亮 但是都是顯示offline
也有想過是不是要跳線 但是想說燈號有亮, phy link應該正常..

硬著頭皮把infiniband spec ,protocl K了一次.

才知道IB 架構要有Subnet Manger 才能正常工作
而硬體switch 會內建此功能

二台對接 因為沒有Switch 某台要啟動 有opensources http://infiniband.sourceforge.net/

一般來講 官方mellanox 驅動裝完後就會有有opensm

我把前期的IB 燒錄FW ,驅動跟working 都搞定了
後面的 GPXE還沒燒進去rom ,想做IB lun boot .

完整安裝步驟整理好會公開..不過我們Lab 目前沒人有空玩Lustre
中性能Server 配上大容量Storage + IB +Lustre 是非常好分散式 高性能儲存
系統搭配...

http://phorum.study-area.org/index....ic,62466.0.html

有點好奇把Lustre 加上 2 張dual port 10 M IB 做MESH storege架構 這樣性能跟
3par 差多少
__________________
~有任何問題 歡迎詢問!!~


自取地址:台北市長春路15號11樓之2
聯絡電話: (02)25214840
手機: 0915153332
Line:@osslab
營業時間為週一至週五 早上10:00 ~18:30


夢理都是DATA
http://www.osslab.com.tw/
舊 2011-01-05, 04:13 PM #39
回應時引用此文章
thx離線中