【記錄】spark任務提交yarn-cluster一直accepted問題

問題一：spark 提交任務時，在resourcemanager上提交任務能執行，在其他機器上提交不了 問題二：spark任務提交yarn時，用cilent模式不報錯，換成cluster一直accepted 問題一排查：檢查配置文件 spark-env.sh spark-defaults.conf 發現在spark-env.sh 中指定的 HADOOP_CONF_DIR 有誤，並不是現在正在用的版

>>阅读原文<<