Spark學習之編程進階總結(一)

1、簡介　　 　　此次介紹前面沒有說起的 Spark 編程的各類進階特性，會介紹兩種類型的共享變量：累加器（accumulator）與廣播變量（broadcast variable）。累加器用來對信息進行聚合，而廣播變量用來高效分發較大的對象。在已有的 RDD 轉化操做的基礎上，咱們爲相似查詢數據庫這樣須要很大配置代價的任務引入了批操做。爲了擴展可用的工具範圍，還會簡單介紹 Spark 與外部程序

>>阅读原文<<