技術(shù)編號(hào):40394171
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明屬于屬于邊緣計(jì)算領(lǐng)域,具體涉及一種適用于邊緣計(jì)算場(chǎng)景的分布式訓(xùn)練通信壓縮方法、裝置、分布式訓(xùn)練系統(tǒng)。背景技術(shù)、當(dāng)前的分布式深度神經(jīng)網(wǎng)絡(luò)訓(xùn)練大多基于云服務(wù)器集群環(huán)境,依靠充裕的計(jì)算資源和高速網(wǎng)絡(luò)進(jìn)行大規(guī)模模型訓(xùn)練。但是隨著邊緣計(jì)算的興起,直接在邊緣端利用海量分散數(shù)據(jù)進(jìn)行就地智能處理的需求日益增長(zhǎng)。將分布式訓(xùn)練部署到資源受限的邊緣設(shè)備中面臨巨大挑戰(zhàn)。邊緣設(shè)備的帶寬、計(jì)算能力等硬件條件普遍較弱,而分布式訓(xùn)練又極為依賴節(jié)點(diǎn)間的高頻通信。已有研究表明,通信開(kāi)銷(xiāo)占分布式訓(xùn)練總時(shí)間的比例可達(dá)%以上...
注意:該技術(shù)已申請(qǐng)專利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類(lèi)技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。