AI大模型正在風(fēng)靡全球,國(guó)內(nèi)外產(chǎn)業(yè)巨頭紛紛涌入到智算中心網(wǎng)絡(luò)技術(shù)革新領(lǐng)域中。5月,中國(guó)移動(dòng)聯(lián)合產(chǎn)業(yè)伙伴率先發(fā)布《全調(diào)度以太網(wǎng)(GSE)技術(shù)架構(gòu)白皮書》,創(chuàng)新基于逐包的以太網(wǎng)轉(zhuǎn)發(fā)和全局調(diào)度機(jī)制,突破傳統(tǒng)無損以太性能瓶頸。通過聯(lián)合產(chǎn)業(yè)合作伙伴近半年的技術(shù)攻關(guān),目前已突破了逐報(bào)文容器轉(zhuǎn)發(fā)、動(dòng)態(tài)全局隊(duì)列調(diào)度、報(bào)文亂序重排等一系列關(guān)鍵技術(shù),全調(diào)度以太網(wǎng)技術(shù)棧初步形成。
此次發(fā)布的全調(diào)度以太網(wǎng)(GSE)原型機(jī)為盒式交換網(wǎng)絡(luò)設(shè)備,采用可編程芯片實(shí)現(xiàn),可兼做GSE網(wǎng)絡(luò)接入和轉(zhuǎn)發(fā)節(jié)點(diǎn)。在功能上支持基于報(bào)文容器的全路徑“噴灑”轉(zhuǎn)發(fā),端到端請(qǐng)求及授權(quán)機(jī)制,以及報(bào)文亂序重排等,滿足大模型的網(wǎng)絡(luò)優(yōu)化需求。初步測(cè)試結(jié)果表明,相較于傳統(tǒng)無損以太網(wǎng)絡(luò),GSE網(wǎng)絡(luò)在AllReduce及alltoall兩大場(chǎng)景任務(wù)完成時(shí)間(JCT)可縮短2-3倍。
據(jù)悉,此前中國(guó)移動(dòng)研究院攜手30余家合作伙伴啟動(dòng)了“全調(diào)度以太網(wǎng)(GSE)推進(jìn)計(jì)劃”,該計(jì)劃旨在以下幾個(gè)方面推動(dòng)技術(shù)創(chuàng)新,一是物理層增強(qiáng),包括低時(shí)延技術(shù)、物理層安全、光交換等;二是鏈路層新機(jī)制,包括基于報(bào)文分發(fā)和重組機(jī)制、新的調(diào)度技術(shù)等;三是網(wǎng)絡(luò)層新協(xié)議,包括新型組網(wǎng)拓?fù)、新型組播/任播協(xié)議等;四是傳輸層改進(jìn): 擁塞控制等;五是管理和運(yùn)維優(yōu)化,支持網(wǎng)絡(luò)可視化、可調(diào)試能力、多維自動(dòng)化能力。
本次全調(diào)度以太網(wǎng)(GSE)原型設(shè)備的發(fā)布,為新型智算中心網(wǎng)絡(luò)生態(tài)邁出堅(jiān)實(shí)的第一步。中國(guó)移動(dòng)研究院將持續(xù)深化全調(diào)度以太網(wǎng)技術(shù)的研究、驗(yàn)證和應(yīng)用,依托移動(dòng)信息產(chǎn)業(yè)鏈優(yōu)勢(shì),聚合產(chǎn)學(xué)研力量,與各界合作伙伴攜手創(chuàng)新,形成共識(shí),共同推動(dòng)新型智算中心網(wǎng)絡(luò)的發(fā)展和應(yīng)用。