spark學習筆記之spark技術框架

Spark的核心 Spark的運行框架: -SparkContext驅動程序 -ClusterManager集羣資源管理器 -Executor任務執行進程 Spark Context 是驅動程序,它是spark的根本。SparkContext提交作業,並請求分配資源,Cluster Manager(集羣資源管理器)會根據當前集羣的使用情況,根據先進先出的原則分配給worker,先分配的應用程序會分
相關文章
相關標籤/搜索