spark統計文件行數

雖然接觸大數據2年了，之前對spark使用都是和solr建索引任務，因爲目前的工做不多涉及spark了，爲了避免遺忘，從頭開始複習一下spark，不一樣的是此次記錄下來，一來方便本身查閱，二來對於剛入門的同行也算個案例。PS.高手勿噴java 一、spark讀取文件，統計行數apache Intellj idea 開發工具環境就不在介紹了，網上不少教程，惟一須要注意的是你的spark或者scala

>>阅读原文<<