spark內核揭祕-02-spark集羣概覽

2019獨角獸企業重金招聘Python工程師標準>>> Spark集羣預覽： 官方文檔對spark集羣的初步描述如下，這是一個典型的主從結構： 官方文檔對spark集羣中的一些關鍵點給出詳細的指導： 其Worker的定義如下所示： 需要注意的是Spark Driver所在的集羣需要和Spark集羣最好位於同一個網絡環境中，因爲Driver中的SparkContext實例需發送任務給不同Worker

>>阅读原文<<