Spark中yarn模式兩種提交任務方式(yarn-client與yarn-cluster)

Spark可以和Yarn整合,將Application提交到Yarn上運行,和StandAlone提交模式一樣,Yarn也有兩種提交任務的方式。 1.yarn-client提交任務方式 配置  在client節點配置中spark-env.sh添加Hadoop_HOME的配置目錄即可提交yarn 任務,具體步驟如下: export HADOOP_CONF_DIR=$HADOOP_HOME/etc/h
相關文章
相關標籤/搜索