spark 任務調度詳細概述

關於任務調度的文章，網上不少，我是本着想系統深入理解的目的，寫下這邊文章算法 任務調度：     多線程 1.Action類型的算子觸發job的執行。源碼中調用了SparkContext的runJob()方法，跟進源碼發現底層調用的是DAGScheduler的runJob()方法。線程    DAGScheduler會將咱們的job按照寬窄依賴劃分爲ResultStage和ShuffleMapSt

>>阅读原文<<