Sparrow - Distributed, Low Latency Scheduling

解決的問題 現有的scheduler方案, 都是基於master的, 因爲schedule必須要知道所有slave的情況, 然後才能決定到底如果schedule  這個對於傳統的batch系統是沒有問題的, 因爲Hadoop一個job可能需要幾個小時, 在劃分task的時候可以比較粗粒度, task的個數也比較少, 所以花費幾秒去schedule task沒有任何問題 但是隨着對latency的要

>>阅读原文<<