spark任務執行過程&spark與yarn的對比

spark任務執行過程如下圖 Yarn和Spark的StandAlone調度模式對比 ResouceManager Master 管理子節點、資源調度、接收任務請求 NodeManger Worker 管理當前節點，並管理子進程 YarnChild Executor 運行真正的計算邏輯的（Task） Client SparkSubmit （Client + ApplicaitonMaster）提交

>>阅读原文<<