elasticsearch+redis+hashmap 把分散的日誌根據每個訪問連接到一起

之前做公司日誌清洗分析，一個用戶進入網站的頁面會有多個事件會觸發數據上報，數據上報後通過後端的集羣收集，通過rsyslog處理放在在s3不同的文件裏。 日誌格式是每條上報數據一條記錄。 需求是進入播放頁面統計各個事件的數量，哪個環節流失了用戶。 一開始是選擇使用elk這一套，把日誌一條一條解析成文檔，存入elasticsearch，kibina裏面查詢做展示。 各個事件通過elasticsearc

>>阅读原文<<