Flume分佈式日誌收集系統

1.flume是分佈式的日誌收集系統,把收集來的數據傳送到目的地去。 2.flume裏面有個核心概念,叫做agent。agent是一個java進程,運行在日誌收集節點。通過agent接收日誌,然後暫存起來,再發送到目的地。 3.agent裏面包含3個核心組件:source、channel、sink。   3.1 source組件是專用於收集日誌的,可以處理各種類型各種格式的日誌數據,包括avro、
相關文章
相關標籤/搜索