10.6 Spark資源調度和任務調度-standalone模式

  1,當每一個worker啓動起來以後,會向master註冊信息(內容:當前worker進程所管理的資源狀況);這樣Master就掌握了整個集羣的資源狀況算法 2,當new SparkConf 和SparkContext的時候Driver當中就啓動了DAGScheduler和TaskScheduler;這時候TaskScheduler會向Master發送請求(內容:當前Application執行
相關文章
相關標籤/搜索