Spark的架構

架構組件基本概念：node Spark集羣中的Master負責集羣總體資源管理和調度，Worker負責單個節點的資源管理。Driver程序是應用邏輯執行的起點，而多個Executor用來數據進行並行處理。架構 Spark的構成：函數 -ClusterManager：在standalone模式中即爲，Master：主節點，控制整個集羣，監控Worker。在YARN模式中爲資源管理器。網站 -Work

>>阅读原文<<