Spark學習: Spark-Scala-IntelliJ開發環境搭建和編譯Jar包流程

       使用scala編寫spark腳本的話,能夠直接在spark-shell中運行,若是要提交整個腳本的話,就必須將scala腳本編譯成Jar包,而後經過spark-submit 提交Jar包給spark集羣,當須要重複利用腳本的話通常是須要編譯成Jar包的,因此後面會介紹下怎麼將scala編譯成Jar包,前面則會介紹下怎麼搭建spark-scala的開發環境,同時使用IntelliJ I
相關文章
相關標籤/搜索