spark組件詳細介紹

Spark應用程序在集羣上作爲獨立的進程集合運行，由主程序(稱爲驅動程序)中的sparkContext對象與Spark集羣進行交互協調 每個application（應用程序）有自己的executor進程，他們相互隔離，每個executor中可以有多個task線程。這樣可以更好的隔離各個application；各個spark application 不能分享數據，除非把數據存儲到外部系統。 （1）d

>>阅读原文<<