從云計(jì)算到智算中心：網(wǎng)絡(luò)架構(gòu)的十年之變

十年前，“云計(jì)算”還是行業(yè)熱詞，如今卻已成為“傳統(tǒng)”技術(shù)的代名詞。十年間，機(jī)房轟鳴聲依舊，但網(wǎng)絡(luò)工程師的挑戰(zhàn)已悄然升級(jí)。

以資深工程師“老王”為例：他曾親手部署數(shù)百臺(tái)服務(wù)器，卻在智算中心的多網(wǎng)卡配置中“卡了殼”。這并非個(gè)例，傳統(tǒng)云計(jì)算與智算中心在網(wǎng)絡(luò)架構(gòu)上存在本質(zhì)差異，尤其在GPU服務(wù)器的多網(wǎng)卡設(shè)計(jì)下，路由規(guī)劃的復(fù)雜度顯著提升。

智算網(wǎng)絡(luò)的獨(dú)特挑戰(zhàn)

傳統(tǒng)架構(gòu) vs 智算架構(gòu)

傳統(tǒng)CPU服務(wù)器：?jiǎn)尉W(wǎng)卡出口設(shè)計(jì)，依賴OS內(nèi)核協(xié)議棧轉(zhuǎn)發(fā)報(bào)文，拓?fù)浜?jiǎn)單，側(cè)重虛擬化資源彈性調(diào)度。

智算GPU服務(wù)器：需支持AI訓(xùn)練的高帶寬需求，通常配備多網(wǎng)卡（如8張參數(shù)網(wǎng)卡），分別接入?yún)?shù)網(wǎng)、存儲(chǔ)網(wǎng)、業(yè)務(wù)網(wǎng)和管理網(wǎng)。跨服務(wù)器通信需確保同軌（Rail）網(wǎng)卡間高效互通（參考：多軌道網(wǎng)絡(luò)架構(gòu)解析）。

多軌道網(wǎng)絡(luò)架構(gòu)

典型故障場(chǎng)景分析

場(chǎng)景1：報(bào)文誤發(fā)管理網(wǎng)段

問題描述：兩臺(tái)GPU服務(wù)器（A、B）的8張參數(shù)網(wǎng)卡（A1-A8、B1-B8）接入同一參數(shù)網(wǎng)，但未規(guī)劃路由。此時(shí)，服務(wù)器A的默認(rèn)路由指向業(yè)務(wù)網(wǎng)，A1-B1的同軌通信報(bào)文可能誤經(jīng)管理網(wǎng)段發(fā)出，導(dǎo)致通信失敗。

場(chǎng)景2：回程路由失效

問題描述：若所有參數(shù)網(wǎng)卡分配同網(wǎng)段不同IP，服務(wù)器B通過B1向A1發(fā)送報(bào)文時(shí)，回包可能命中非默認(rèn)路由（如其他7張網(wǎng)卡的低成本路徑），導(dǎo)致鏈路中斷。

路由配置示例

解決方案：策略路由與自動(dòng)化工具

1. 多路由表與策略路由

多路由表：Linux支持多張路由表，可獨(dú)立定義不同網(wǎng)段的路由規(guī)則（如為10.0.5.0/24網(wǎng)段指定專用出口）。

策略路由：基于源IP、目的IP或網(wǎng)卡等條件，動(dòng)態(tài)選擇路由表，確保流量按預(yù)期路徑轉(zhuǎn)發(fā)。

2. 自動(dòng)化配置工具：EasyRoCE IRM

推出的IRM工具（In-Node Route Map）可批量解決多網(wǎng)卡路由難題，三步操作：

將IRM工具上傳至管理節(jié)點(diǎn)；

導(dǎo)入路由規(guī)劃文件（通過EasyRoCE-AID生成，含IP地址、Rail平面劃分等）；

運(yùn)行腳本，自動(dòng)生成JSON配置并下發(fā)集群，實(shí)現(xiàn)策略路由一鍵生效。

IRM工具工作流程IP與Rail規(guī)劃表示例

從手動(dòng)到智能，釋放智算網(wǎng)絡(luò)潛力

智算中心的網(wǎng)絡(luò)架構(gòu)復(fù)雜度遠(yuǎn)超傳統(tǒng)云環(huán)境，但通過策略路由與星融元EasyRoCE Toolkit的自動(dòng)化能力，運(yùn)維人員可快速實(shí)現(xiàn)精準(zhǔn)路由控制。工具生成的JSON配置還可復(fù)用至其他場(chǎng)景，大幅提升部署效率。

相關(guān)資源

EasyRoCE工具包

A-Lab技術(shù)專欄

十年技術(shù)變遷，星融元與您共同應(yīng)對(duì)智算時(shí)代的網(wǎng)絡(luò)挑戰(zhàn)。.

審核編輯 黃宇