滴滴沙龍

第一位：王靜靜 滴滴的任務調度系統 Capricornus 1、數據的依關係：在HDFS上進行標記，同時在關鍵節點上配置監控指標，以保證任務可回溯執行 2、再調度服務（拋棄傳統的每個woker線程一個任務隊列）： 1、採用一箇中控進程： 1、產生一個任務後，由該進程根據任務所需的資源，來匹配資源處理能力最適合的woker來處理 2、監控woker的運行情況，動態擴容 2、離線基於Hive 今日頭條

>>阅读原文<<