Spark實戰(五)spark streaming + flume(Python版)

一、flume安裝 （一）概述    Flume是一個分佈式、可靠、和高可用的海量日誌採集、聚合和傳輸的系統。Flume可以採集文件，socket數據包等各種形式源數據，又可以將採集到的數據輸出到HDFS、hbase、hive、kafka等衆多外部存儲系統中，一般的採集需求，通過對flume的簡單配置即可實現，Flume針對特殊場景也具備良好的自定義擴展能力，因此flume可以適用於大部分的日常數

>>阅读原文<<