spark學習--grouByKey 和 reduceByKey區別及reduceByKey特點在spark調優中的利用

Spark學習---GrouByKey和reduceByKey的區別，以及reduceByKey特點在spark優化中的使用 先來一個例子： 需求：讀取學生信息表到SparkContext後，分別使用GroupByKey,reduceByKey統計各班的人數 代碼和結果如下： 獲取SparkContext: 使用groupByKey---結果和代碼放到一起截圖的: reduceByKey: 結果一

>>阅读原文<<