spark中資源調度的源碼分析【圖片】

  Spark資源調度: 1.啓動集羣,worker向master彙報資源,master掌握了集羣資源 2.提交application時,會創建Driver,當new SparkContext時,會創建兩個對象DAGScheduler和TaskScheduler 3.TaskScheduler向master申請資源 4.MAster找到滿足資源的worker,啓動executor 5.execut
相關文章
相關標籤/搜索