Spark RDD中Runtime流程解析

一、Runtime架構圖 (1)從Spark  Runtime的角度講,包括五大核心對象:Master、Worker、Executor、Driver、CoarseGrainedExecutorBackend。 (2)Spark在做分佈式集羣系統設計的時候:最大化功能獨立、模塊化封裝具體獨立的對象、強內聚鬆耦合。Spark運行架構圖如下圖所示。    (3)當Driver中的SparkContext
相關文章
相關標籤/搜索