Spark總體架構和運行流程

本節將首先介紹 Spark 的運行架構和基本術語,然後介紹 Spark 運行的基本流程,最後介紹 RDD 的核心理念和運行原理。 Spark 總體架構 Spark 運行架構如圖 1 所示,包括集羣資源管理器(Cluster Manager)、多個運行作業任務的工作結點(Worker Node)、每個應用的任務控制結點(Driver)和每個工作結點上負責具體任務的執行進程(Executor)。 圖
相關文章
相關標籤/搜索