Spark2原理分析-DAGScheduler(Stage調度器)的基本概念

概述 本文介紹Saprk中DAGScheduler的基本概念。該對象實現了一個面向Stage的高層調度器。它爲每個Job計算一個Stage的DAG圖，並跟蹤這些RDD和Stage的輸出，並找到一個最小的代價的DAG圖來運行該Job。 DAGScheduler介紹 在文章《spark2原理分析-Stage的實現原理》中，介紹了Stage的基本概念和Stage的提交實現原理。本文主要介紹 DAGSch

>>阅读原文<<