sona:Spark on Angel大規模分佈式機器學習平臺介紹

Angel是一個基於參數服務器(Parameter Server)開發的高性能分佈式機器學習平臺,它基於騰訊內部的海量數據進行了反覆的調優。 Angel的核心設計理念圍繞模型,將高維度的大模型切分到多個參數服務器節點,並通過高效的模型更新接口和運算函數,以及靈活的同步協議,輕鬆實現各種高效的機器學習算法。 Angel基於Java和scala開發,能在Yarn上直接調度運行,並基於PS Servic
相關文章
相關標籤/搜索