Spark On Yarn搭建

實現步驟: 1)搭建好Hadoop(版本,2.7)集羣 2)安裝和配置scala(版本,2.11) 上傳解壓scala-2.11.0.tgz—>配置 /etc/profile文件 配置示例: 3)在NodeManager節點(04,05,06節點)上安裝和配置Spark 4)進入Spark安裝目錄的Conf目錄,配置:spark-env.sh 文件 配置示例: export JAVA_HOME=/
相關文章
相關標籤/搜索