spark源碼學習(三)- TaskSchedular 提交taskset過程

背景      之前一直覺得task本地行,將task分配到哪個executor上是taskschedular作的事情,知道看了DagSchedular和TaskSchedular以後才知道,DagSchedular是負責上層調度,task具體運行在那個executor上,而TaskSchedular是決定task在ececutor上是process級別的本地行仍是memory級別的本地行,由於在
相關文章
相關標籤/搜索