spark-stage任務劃分、sparkclient運行模式

sparkclient運行模式 代碼塊的提交、sparkshell的執行 sparksubmit在AM下啓動master執行Driver對任務進行劃分和切片、初始化sparkcontext, Driver向RM申請啓動一臺機器並啓動EL,RM會選擇一臺機器並啓動EL(EL執行的仍然是AM中的main方法,然後EL會繼續申請資源。 獲取資源後EL會向資源機器發送啓動EB,並創建Executor對象的
相關文章
相關標籤/搜索