利用Spark解析Tomcat日誌,並將統計結果存入Mysql數據庫

本文試圖實現的需求場景爲:以學習Spark知識點爲目的,編寫Scala利用Spark解析800M的tomcat日誌文件,打印一段時間內ERROR級別記錄的前10行,統計每分鐘的日誌記錄數,並將統計結果存入mysql數據庫中。以前曾用JAVA寫過一次一樣的處理邏輯,但在學習了Scala以後,真的感受在計算方面Scala要比JAVA方便的多。沒有學習Scala語言的同窗速度速度了啊……java 技術要
相關文章
相關標籤/搜索