ElasticSearch構建千億級日誌分析系統-實時分析

  1、背景介紹 隨着業務系統的複雜度上升，單應用無法適用業務場景，分佈式系統已經成爲目前服務器的常用解決方案。 隨之而來的是分析問題變得困難，需要跨多個模塊進行分析定位，涉及的應用節點幾十上百個，需要一套日誌收集與分析架構來滿足我們的日常問題定位。 下圖是一個實時日誌採集系統架構：   分爲採集器、消息隊列、處理器、存儲分析四個模塊。 2、採集器 採集各個源頭日誌上報到消息隊列，這裏用到了四個採

>>阅读原文<<