spark 小demo

本文是利用scala進行wordcount的demo，環境是scala 2.11.8、 esclipse for scala 、spark 2.1.0 hadoop 2.7.3 1、首先命令行形式運行demo （1）在你hdfs下的隨便一個文件夾新建一個txt文件，做被統計文件夾，這裏我是在tmp文件夾下新建的 hdfs dfs -touchz /tmp/input.txt 然後在文件裏寫進點東西

>>阅读原文<<