大數據技術之Flume

大數據技術之Flume 概述 Flume定義 ​ Flume是Cloudera提供的一個高可用的,高可靠的,分佈式的海量日誌採集、聚合和傳輸的系統。Flume基於流式架構(採集日誌的單位是一行),靈活簡單 Flume最主要的作用就是:實時讀取服務器本地磁盤的數據,將數據寫入HDFS Flume的優點 可以與任意存儲進程集成 輸入的數據速率大於寫入目的的存儲速率,flume會進行緩衝,減小hdfs的
相關文章
相關標籤/搜索