spark任務執行過程&spark與yarn的對比

spark任務執行過程以下圖 Yarn和Spark的StandAlone調度模式對比web ResouceManager Master 管理子節點、資源調度、接收任務請求 NodeManger Worker 管理當前節點,並管理子進程 YarnChild Executor 運行真正的計算邏輯的(Task) Client SparkSubmit (Client + ApplicaitonMaster
相關文章
相關標籤/搜索