Spark-任務調度

目錄 流程 流程    1.Soark中,咱們寫的應用程序都是一個個RDD對象組成的。能夠根據代碼畫出來一個DAG有向無環圖,將DAG有向無環圖交給DAG Scheduler;    2.DAG Scheduler根據款窄依賴將DAG有有向無環圖切割成一個個的stage,將切割出來的stage封裝成另外一個對象TaskSet,TaskSet就是一個個的stage。而後DAG Scheduler將一
相關文章
相關標籤/搜索