如何搭建大規模機器學習平臺?以阿里和螞蟻的多個實際場景爲例

導讀 :近年來,隨着「大」數據及「大」模型的出現,學術界和工業界對分佈式機器學習算法引起了廣泛關注。針對這一剛需,本論文設計了一個獨一無二的分佈式平臺——鯤鵬。它無縫的結合了分佈式系統及並行優化算法,解決了大規模機器學習算法帶來的一系列問題。鯤鵬不僅囊括了數據/模型並行、負載平衡、模型同步、稀疏表示、工業容錯等特性,而且還提供了封閉好的、宜於調用的API供普通的機器學習者開發分佈式算法,降低使用成
相關文章
相關標籤/搜索