Spark架構與工作機制

Spark架構與工作機制 Spark的架構 — 架構組件概念簡介 Spark集羣中Master負責集羣整體資源管理和調度，Worker負責單個節點的資源管理。Driver程序是應用邏輯執行的起點，而多個Executor用來對數據進行並行處理。   Spark的構成: ClusterManager : 在standalone模式中即爲，Master ：主節點，控制整個集羣，監控Worker。在YAR

>>阅读原文<<