Spark詳解(十一):Spark運行架構原理分析

1. Spark 運行架構總體分析 1.1 總體介紹 Spark應用程序的運行架構基本上由三部分組成,包括SparkContext(驅動程序)、ClusterManger(集羣資源管理器)和Executor(任務執行進程)組成 SparkContext負責與Cluster Manager通信,進行資源的分配和監控等,負責作業的執行的全生命週期管理。 ClusterManger提供了資源的分配和管理
相關文章
相關標籤/搜索