Flume簡單介紹

在一個完整的離線大數據處理系統中，除了HDFS+MapReduce+Hive組成分析系統的核心之外，還需要數據採集、結果數據導出、任務調度等不可或缺的輔助系統，而這些輔助工具在hadoop生態體系中都有便捷的開源框架，在此，我們首先來介紹下數據採集部分所用的的開源框架——Flume。 一、FLUME概述 Flume是Cloudera提供的一個高可用的，高可靠的，分佈式的海量日誌採集、聚合和傳輸的系

>>阅读原文<<