分佈式日誌收集系統Scribe原理

1.分佈式日誌收集系統:背景介紹 許多公司的平臺每天會產生大量的日誌（一般爲流式數據，如，搜索引擎的pv，查詢等），處理這些日誌需要特定的日誌系統，一般而言，這些系統需要具有以下特徵： （1） 構建應用系統和分析系統的橋樑，並將它們之間的關聯解耦； （2） 支持近實時的在線分析系統和類似於Hadoop之類的離線分析系統； （3） 具有高可擴展性。即：當數據量增加時，可以通過增加節點進行水平擴展。

>>阅读原文<<