集羣提交spark任務命令

 >>spark-submit --class WordCount  DataMining.jar /dept_ana/part-00000 /dept_ana/output/wordCountResult --master yarn --num-executors 30 --executor-memory 4g --executor-cores 2 --name test_wordcount微信

--name 任務名稱大數據

/dept_ana/part-00000  程序讀取的文件路徑
spa

 

/dept_ana/output/wordCountResult 輸出的文件路徑
it

 

 

更多精彩內容,歡迎掃碼關注如下微信公衆號:大數據技術宅。大數據、AI從關注開始

相關文章
相關標籤/搜索