spark源碼學習(三):job的提交以及runJob函數的分析

                                spark源碼學習:sparkContext的初始化分析(三) 併發        上一篇僅僅談及了taskScheduler和schedulerBackend相關的代碼。這篇blog記錄一下和DAGScheduled相關的代碼。DAGScheduled是底層的面向stage調度的劃分,還會去跟蹤哪些RDD和stage的輸出已經物化,
相關文章
相關標籤/搜索