大數據離線日誌流程分析

大數據離線日誌分析流程:        flume是常用的大數據日誌收集工具,是一個日誌採集框架,主要有三大塊組成,即:source(採集數據,channel是一個傳輸通道,將scource採集來的數據傳輸給sink,sink負責將數據存儲到hdfs分佈式存儲系統上邊)。        sqoop是一個hadoop和關係型數據庫之間數據導入導出的一個工具,講hdfs上的數據傳遞到mysql或者or
相關文章
相關標籤/搜索