Intellj IDEA +SBT + Scala + Spark Sql讀取HDFS數據

[size=large]前提Spark集羣已經搭建完畢,若是不知道怎麼搭建，請參考這個連接： [url]http://qindongliang.iteye.com/blog/2224797[/url] 注意提交做業，須要使用sbt打包成一個jar，而後在主任務裏面添加jar包的路徑遠程提交便可，無須到遠程集羣上執行測試，本次測試使用的是Spark的Standalone方式 sbt依賴以下： [/s

>>阅读原文<<