Spark-神奇的共享變量

通常狀況下，當一個 傳遞給 Spark 操做 ( 例如 map 和 reduce) 的函數在 遠 程 節 點上面 運 行 時 ，Spark 操做 實際 上操做的是 這 個函數所用 變 量的一個獨立副本。 這 些 變 量被複制到每臺機器上，而且 這 些 變 量在 遠 程機器上   的全部更新都不會 傳遞 回 驅動 程序。一般跨任 務 的 讀 寫 變 量是低效的，可是， Spark 還 是 爲兩 種常

>>阅读原文<<