圖文簡述flume的巨大用途

        談到大數據，我們很常會想到hdfs、mapreduce、hbase、spark、hive等高大上的大數據工具或底層組件，但我們不能忘了飲水思源，我們的大數據的數據從哪裏來呢？ 有來自於mysql、oracle等關係型的結構化數據庫，也有來自html、log等半結構數據，但問題來了！log類的文本如何採集、如何上傳到hdfs或kafka中？ 大家可能會想到採用ftp等手工傳輸方式，但

>>阅读原文<<