Spark-submit提交任務到集羣

1 IDEA 打包 示例代碼參考AMPCamp2015之SparkSQL,開發環境使用idea。首先需要將程序打包成jar 選擇project structure --》artifacts ,由於集羣已經有了運行依賴的jar包,打包時可以將這些jar包排除出去,以減小打包後的jar包的大小。 點擊ok,然後選擇build --》build artifacts,SparkSQLTest --》bui
相關文章
相關標籤/搜索