Spark DAG之劃分Stage

概要 介紹Stage的定義，DAGScheduler劃分Stage流程。web Stage 查看Stage定義 Stage中有兩個重要屬性，rdd和parents，分別記錄的是切分處的RDD和父Stage信息，這一點結合我後面的例子更好理解。Stage有兩個子類，ShuffleMapStage、ResultStage，二者分別增長了一個重要屬性信息，以下svg stage 差別屬性 做用 Shuf

>>阅读原文<<