六、Spark性能調優——算子調優

目錄 一、mapPartition 二、freachPartition優化數據庫操作 三、filter 與 coalesce結合 四、repartition 解決 SparkSQL 低並行度問題 五、reduceByKey 本地聚合 一、mapPartition 普通的 map 算子對 RDD 中的每一個元素進行操作， 而 mapPartitions 算子對 RDD中每一個分區進行操作。 如果是普

>>阅读原文<<