Spark執行流程

大體執行流程 1.driver執行main方法(懶執行),action算子觸發觸發job 2.根據寬窄依賴劃分stage 3.每個stage會被整理成taskset(包含多個task)4.每個task分發到具體的Executor去執行   完整調度流程     1.當Driver啓動的時候,初始化時會相應的創建DagScheduler、TaskScheduler 2.TaskScheduler初始
相關文章
相關標籤/搜索