Spark案例:Scala版統計單詞個數

利用Spark的RDD可以對本機或集羣上的文件進行詞頻統計。 1、創建Scala項目SparkScalaWordCount 2、創建lib目錄,添加spark的jar,並添加作爲項目的庫 3、在項目根目錄創建test.txt文件 4、創建WordCount對象 package net.hw.spark.wc import org.apache.spark.{SparkConf, SparkCont
相關文章
相關標籤/搜索