Spark 核心概念:Master、Worker、Driver Program、Executor、RDDs

一、Master          Spark 特有資源調度系統的 Leader,掌管着整個集羣的資源信息(Standalone模式),類似於 Yarn 集羣中的ResourceManager。 主要功能: 監聽 Worker,看集羣中的 Worker 是否正常工作; 管理 Worker、Application(接收 Worker 的註冊並管理所有的 Worker;接收 Client 提交的 Ap
相關文章
相關標籤/搜索