集羣提交spark任務命令
>>spark-submit --class WordCount DataMining.jar /dept_ana/part-00000 /dept_ana/output/wordCountResult --master yarn --num-executors 30 --executor-memory 4g --executor-cores 2 --name test_wordcount微信
--name 任務名稱大數據
/dept_ana/part-00000 程序讀取的文件路徑
spa
/dept_ana/output/wordCountResult 輸出的文件路徑
it
更多精彩內容，歡迎掃碼關注如下微信公衆號：大數據技術宅。大數據、AI從關注開始
相關文章
- 1. Spark集羣任務提交
- 2. Spark-submit提交任務到集羣
- 3. spark集羣提交任務過程
- 4. spark提交任務到集羣
- 5. spark-submit提交任務到集羣
- 6. Docker中提交任務到Spark集羣
- 7. spark任務提交
- 8. 遠程提交Spark任務到yarn集羣
- 9. Java Web提交任務到Spark Standalone集羣並監控
- 10. 在kerberos化hadoop集羣提交spark任務
- 更多相關文章...
- • Swarm 集羣管理 - Docker教程
- • SVN 提交操作 - SVN 教程
- • Docker 清理命令
- • Spring Cloud 微服務實戰(三) - 服務註冊與發現
相關標籤/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
歡迎關注本站公眾號,獲取更多信息
