企業中項目日誌數較多 儲存處理方式elk和mysql哪種方式更合適?

博主工作的一個項目裏用了elk來存儲用戶操作日誌,日誌量大概是每天一千萬左右的數據,最近服務器的磁盤被塞滿了   本想將時間較長的數據刪除掉   但當時刪除總是出現版本衝突的錯誤 並且es在單個索引數據達到 億級以上的時候查詢時間也是不樂觀的 於是乎博主花了點時間將es的日誌數據全部查詢出來    準備將這些數據包括以後的日誌數據都存儲到mysql中      博主的日誌都是先全部存入kafka然

>>阅读原文<<