DAGScheduler實現-2.0v

轉載:https://www.jianshu.com/p/ad9610bcb4d0   整體架構 任務調度邏輯視圖 DAGScheduler:負責分析用戶提交的應用,並根據計算任務的依賴關係建立DAG,且將DAG劃分爲不同的Stage,每個Stage可併發執行一組task。注:DAG在不同的資源管理框架實現是一樣的。 TaskScheduler:DAGScheduler將劃分完成的Task提交到T
相關文章
相關標籤/搜索