spark-6 spark運行架構和任務調度

spark運行架構和任務調度 spark運行架構 spark任務調度 基於wordcount程序剖析spark任務的提交、劃分、調度流程 spark運行架構 簡單來講：driver端劃分任務，向資源管理器發送申請資源，executor向driver端（不是MAster）申請task，負責執行任務 Driver端向資源管理器Master(可能是HMaster或者yarn的NodeManager)發送

>>阅读原文<<