PySpark shell 修改log4j.properties Spark日誌調整

下圖是 是PySpark shell 啓動時的樣子。 如果覺得shell 中輸出的日誌信息過多而使人分心，可以調整日誌的級別來控制輸出的信 息量。 你需要在conf 目錄下創建一個名爲log4j.properties 的文件來管理日誌設置。Spark 開發者們已經在Spark 中加入了一個日誌設置文件的模版，叫作log4j.properties.template。 要讓日誌看起來不那麼囉嗦，可以先

>>阅读原文<<