Spark-Submit 常用命令

一個Spark任務好不容易開發完成了,終於要上集羣跑了,就差萬里長征的最後一步了:通過Spark-Submit命令上集羣運行,這時候需要做哪些常規與優化工作呢。 這裏貼一個常用的SparkSubmit提交腳本 腳本名稱:submitHelperLabel.sh 腳本內容: spark-submit \ --master yarn \ --name helper-label-count \ --de
相關文章
相關標籤/搜索