Spark資源調度和任務調度流程

spark運行架構 Spark資源調度和任務調度的流程： 一、啓動集羣后，Worker節點會向Master節點彙報資源狀況，Master掌握了集羣資源狀況。web 二、當Spark提交一個Application後，根據RDD之間的依賴關係將Application造成一個DAG有向無環圖。任務提交後，Spark會在Driver端建立兩個對象：DAGScheduler和TaskScheduler。架構

>>阅读原文<<