Spark閉包

閉包的作用可以理解爲：函數可以訪問函數外部定義的變量，但是函數內部對該變量進行的修改，在函數外是不可見的，即對函數外源變量不會產生影響。 其實，在學習Spark時，一個比較難理解的點就是，在集羣模式下，定義的變量和方法作用域的範圍和生命週期。這在你操作RDD時，比如調用一些函數map、foreach時，訪問其外部變量進行操作時，很容易產生疑惑。爲什麼我本地程序運行良好且結果正確，放到集羣上卻得不到

>>阅读原文<<