spark job提交過程

spark job提交過程 2016年11月09日 17:28:35 閱讀數:3203 Driver的任務提交過程 1、Driver程序的代碼運行到action操作,觸發了SparkContext的runJob方法。  2、SparkContext調用DAGScheduler的runJob函數。  3、DAGScheduler把Job劃分stage,然後把stage轉化爲相應的Tasks,把Tas
相關文章
相關標籤/搜索