業界 | Poseidon:高效的分佈式深度學習通信架構

參與:蔣思源、吳攀 近日,卡耐基梅隆大學(CMU)和 Petuum 推出了新一代高效的分佈式深度學習通信架構 Poseidon。Poseidon 是一個易於使用,並能放大 DL 程序在 GPU 集羣性能的通信架構。已存的 DL 程序不需要更改代碼就能通過 Poseidon 在多個機器上自動最優地實現並行化,加速效果和機器數量呈線性增長關係。機器之心簡要地介紹了該論文,詳細內容請查看原論文。 論文:
相關文章
相關標籤/搜索