Spark Stage切分 源碼剖析——DAGScheduler

Spark Stage切分 源碼剖析——DAGScheduler Spark中的任務管理是很重要的內容,可以說想要理解Spark的計算流程,就必須對它的任務的切分有一定的瞭解。不然你就看不懂Spark UI,看不懂Spark UI就無法去做優化...因此本篇就從源碼的角度說說其中的一部分,Stage的切分——DAG圖的創建 先說說概念 在Spark中有幾個維度的概念: 應用Application,
相關文章
相關標籤/搜索