Spark實現分組取 top N 示例 —— Java版

主要步驟:java 加載集合生成RDD(textFile) 對RDD進行轉換,將要排序的屬性進行分離,生成新的RDD(mapToPair) 對鍵進行分組,並在分組內基於第二步分離出的屬性進行排序,並取排序結果的 top N (groupByKey,mapToPair) package rddDemo.examples; import org.apache.spark.SparkConf; imp
相關文章
相關標籤/搜索