曙光公司依據(jù)在分布式計(jì)算領(lǐng)域多年的積累和研究提出了基于IB網(wǎng)的Hadoop分布式計(jì)算平臺(tái)的方案。

本項(xiàng)目采用150臺(tái)A620r-G雙路服務(wù)器構(gòu)建Hadoop平臺(tái)，100臺(tái)A840r-G四路服務(wù)器構(gòu)建數(shù)據(jù)庫處理平臺(tái)，全系統(tǒng)以Infiniband網(wǎng)絡(luò)互聯(lián)，系統(tǒng)平臺(tái)的IB網(wǎng)絡(luò)設(shè)計(jì)中，所有的網(wǎng)絡(luò)設(shè)備的連接均采用冗余設(shè)計(jì)。首先，每臺(tái)服務(wù)器配置兩個(gè)IB端口，IB端口通過冗余綁定方式分別與兩臺(tái)不同的匯聚交換機(jī)相連；此外通過高度冗余的三臺(tái)二層交換機(jī)將所有匯聚交換機(jī)連接為統(tǒng)一的子網(wǎng)，最大限度的提高系統(tǒng)的冗余度和節(jié)點(diǎn)間通信帶寬限制；兩個(gè)IB網(wǎng)關(guān)設(shè)備底層各自與兩臺(tái)二層交換機(jī)相連，上層分別與一臺(tái)路由器連接，上層的兩臺(tái)路由器通過VRRP技術(shù)實(shí)現(xiàn)IB網(wǎng)關(guān)的冗余連接，保證當(dāng)任意一臺(tái)網(wǎng)關(guān)或路由設(shè)備出現(xiàn)故障時(shí)，底層服務(wù)器均有鏈路連接到上層網(wǎng)絡(luò)。

方案價(jià)值

采用上述方案，該系統(tǒng)實(shí)現(xiàn)了Ethernet、Fibre channel、Infiniband三網(wǎng)融合，最大可能的滿足Hadoop集群和數(shù)據(jù)庫處理平臺(tái)的高速通訊的需要。

renxinbo