spark-submit 提交做業到集羣

1 IDEA 打包 示例代碼參考AMPCamp2015之SparkSQL,開發環境使用idea。首先須要將程序打包成jar 選擇project structure --》artifacts ,因爲集羣已經有了運行依賴的jar包,打包時能夠將這些jar包排除出去,以減少打包後的jar包的大小。 點擊ok,而後選擇build --》build artifacts,SparkSQLTest --》bui
相關文章
相關標籤/搜索