大數據架構流程解析

美團的技術架構圖 flume 可以採集文件，socket數據包等各種形式源數據，又可以將採集到的數據輸出到HDFS、hbase、hive、kafka隊列等衆多外部存儲系統中,一般的採集需求，通過對flume的簡單配置即可實現,Flume針對特殊場景也具備良好的自定義擴展能力，因此，flume可以適用於大部分的日常數據採集場景 sqoop sqoop是apache旗下一款「Hadoop和關係數據庫服

>>阅读原文<<