日誌實時收集之FileBeat+Kafka

之前，我們的某一個業務用於實時日誌收集處理的架構大概是這樣的： 在日誌的產生端（LogServer服務器），都部署了FlumeAgent，實時監控產生的日誌，然後發送至Kafka。經過觀察，每一個FlumeAgent都佔用了較大的系統資源（至少會佔用一顆CPU 50%以上的資源）。而另外一個業務，LogServer壓力大，CPU資源尤其緊張，如果要實時收集分析日誌，那麼就需要一個更輕量級、佔用資源

>>阅读原文<<