spark core源碼閱讀-基本架構(二)

spark core源碼閱讀-基本架構(二) Spark基本框架 基本組件 首先有一個大體感知,下圖是spark standalone模型的架構圖 幾種模式 local:本地測試使用 YARN: 基於hadoop資源管理器 Mesos: 一種比Yarn管理更細的資源管理器 YARN的架構圖: ResourceManager: 集羣資源管理器 NodeManager: 每個節點的資源管理器,管理co

>>阅读原文<<