重溫大數據---正兒八經Spark高級

慌的一批。😐😐😐 Spark HistoryServer 應用在運行時候可以用4040端口提供WEB監控。那當應用完成或者說運行失敗的時候怎麼去監控呢？那就是HistoryServer。 配置 配置在spark-env.sh中的SPARK_HISTORY_OPTS,可以理解爲服務端的配置 配置在spark-defaults.conf,可以理解爲客戶端的配置 啓動 HistoryServer

>>阅读原文<<