一個日誌實時處理方案

主要功能 *日誌實時寫入ES,實現實時查詢 *日誌實時寫入HDFS,用於日誌分析 *日誌異常實時預警 使用的主要組件 rsyslog、flume、kafka、hive、zookeeper、storm、presto、sqoop 本案例也是第一次嘗試,基本實現了自己需要的功能,中間可能有許多不是很合理的地方。 大致架構思路如下:
相關文章
相關標籤/搜索