[Binospace] Sparrow(SOSP13)—一種加速短作業的調度方法

背景: 當前大規模數據分析框架的發展朝着兩個趨勢在變化: 1)任務執行時間更短。 2)更大的任務並行度。   因此,在當前分佈式計算框架的調度系統中,需要有所改變,以滿足如下的需求: 1)更快的任務調度效率,mill-seconds級別。 2)良好的容錯,High Availability. 3)較高的吞吐率,High Throughput.   分析一下:什麼原因會造成多任務的作業執行時間較長?
相關文章
相關標籤/搜索