Spark集羣架構

文章目錄 Spark架構 Spark執行任務流程 Spark運行環境 Spark on YARN Spark Standalone Spark架構 Spark可以運行在YARN上也可以運行Mesos上，無論運行在哪個集羣管理架構上，Spark都是以主從架構運行程序。主節點會運行Driver進程，該進程會調用Spark程序的main方法，啓動SparkContext；Executor就是從節點的進程

>>阅读原文<<