flume的日誌採集框架

在一個完整的大數據處理系統中,除了hdfs+mapreduce+hive組成分析系統的核心之外,還需要數據採集、結果數據導出、任務調度等不可或缺的輔助系統,而這些輔助工具在hadoop生態體系中都有便捷的開源框架,如圖所示: 日誌採集框架Flume 1.1 Flume介紹 1.1.1 概述 u Flume是一個分佈式、可靠、和高可用的海量日誌採集、聚合和傳輸的系統。 u Flume可以採集文件,s
相關文章
相關標籤/搜索