spark任務執行流程

●spark任務執行流程 四個步驟web 1.構建DAG(調用RDD上的方法) 2.DAGScheduler將DAG切分Stage（切分的依據是shuffle），將Stage生成的Task一TaskSet的形式給TaskScheduler 3.TaskScheduler調度Task（Driver端根據資源狀況將Task調度到相應的Exector中） 4.Exetor接受Task，而後將Task丟到

>>阅读原文<<