SparkCore——詳述Spark作業調度

前言 我們在之前的博客中講過，TaskScheduler負責每個具體任務的實際物理調度，DAGScheduler負責將作業拆分成爲不停階段的具體有依賴關係的多批任務，可以理解爲DAGScheduler負責任務的邏輯調度。 本篇博客，結合這段時間看過的一些書籍，南國在這裏重點回顧一下Spark中作業調度的相關知識。 作業調度的頂層邏輯概述 作業調度的具體工作流程 作業調度的基本流程如下圖所示： 調度

>>阅读原文<<