Spark - 使用Yarn管理器開啓歷史日誌服務、查看日誌

前言 使用Yarn 作爲集羣管理器，啓動Spark 時，無法再從SparkUI-4040 端口查看相應的信息。只能從Hadoop 的Yarn、歷史服務器查看，但是默認是沒有開啓。所以，這裏展示如何配置開啓歷史服務器、查看日誌。 Hadoop-2.7.3 Spark-2.4.0 1. HDFS 配置 確保你的Hadoop 已經完成配置，並且已經能夠正常啓動。 下面，在已有的Hadoop 配置上，增加

>>阅读原文<<