Alluxio+AVA:讓深度訓練數據上雲

七牛雲 Atlab 實驗室專注於機器視覺方向的深度學習研究。我們團隊針對深度學習訓練打造了高效的訓練平臺 AVA,深度整合了存儲和計算資源。爲了提高算法工程師訓練模型的效率,我們使用 Alluxio 加速訓練任務讀取海量視頻、圖片等樣本文件,並針對我們的應用場景,從元數據管理和讀寫分離等方向入手對 Alluxio 進行改造,實現了文件讀寫性能 50% 以上的提升,同時顯著降低了存儲系統的成本和容量
相關文章
相關標籤/搜索