Spark - 使用Yarn管理器開啓歷史日誌服務、查看日誌

前言 使用Yarn 做爲集羣管理器,啓動Spark 時,沒法再從SparkUI-4040 端口查看相應的信息。只能從Hadoop 的Yarn、歷史服務器查看,可是默認是沒有開啓。因此,這裏展現如何配置開啓歷史服務器、查看日誌。 Hadoop-2.7.3 Spark-2.4.0web 1. HDFS 配置 確保你的Hadoop 已經完成配置,而且已經可以正常啓動。 下面,在已有的Hadoop 配置上
相關文章
相關標籤/搜索