spark on yarn cluster 與 client 模式的區別

Spark on yarn有分爲兩種模式yarn-cluster和yarn-client   Spark支持可插拔的集羣管理模式(Standalone、Mesos以及YARN )，集羣管理負責啓動executor進程，編寫Spark application 的人根本不需要知道Spark用的是什麼集羣管理。Spark支持的三種集羣模式，這三種集羣模式都由兩個組件組成:master和slave。Mas

>>阅读原文<<