Flume定製實戰——日誌平臺架構解析

flume是我2015年爲前公司主導開發【統一日誌平臺】時採用的技術(主要技術棧:flume+ES+Redis+mongoBD+Kafka+Hadoop+Netty ),期間也積累了很多經驗(挖坑、踩坑、填坑)。shell 在我離開前,咱們的日誌平臺數據量爲8億/天,高峯爲8500萬/小時、800萬/5分鐘。 flume agent單機壓測15000/s數據量,未出現程序異常、資源佔用太高與日誌明
相關文章
相關標籤/搜索