spark中資源調度的源碼分析【圖片】

  Spark資源調度:app 1.啓動集羣,worker向master彙報資源,master掌握了集羣資源spa 2.提交application時,會建立Driver,當new SparkContext時,會建立兩個對象DAGScheduler和TaskScheduler對象 3.TaskScheduler向master申請資源blog 4.MAster找到知足資源的worker,啓動execu
相關文章
相關標籤/搜索