Spark 工做流程

1. Spark job提交過程 Driver的任務提交過程html   一、Driver程序的代碼運行到action操做，觸發了SparkContext的runJob方法。 函數 二、SparkContext調用DAGScheduler的runJob函數。 .net 三、DAGScheduler把Job劃分stage，而後把stage轉化爲相應的Tasks，把Tasks交給TaskSchedul

>>阅读原文<<