微軟提出 DNN 並行訓練新方法 PipeDream，比傳統方法快四倍

作者：Amar Phanishayee 譯者：夏夜 發佈時間：2019 年 11 月 15 日 10:00 本文介紹了微軟新提出的 PipeDream，旨在使深度學習網絡訓練並行化水平更高，進而提高訓練效率。 深度神經網絡（DNNs：Deep Neural Networks）已經在大量應用中取得了巨大進展，這些應用包括圖像分類、翻譯、語言建模以及視頻字幕等。但 DNN 訓練極其耗時，需要多個加速器

>>阅读原文<<