Hadoop項目簡單流程及各個組件的做用

今天經過一個簡單的小項目給你們將整個hadoop期間的組件作一個小總結。 這個項目按照不一樣組件的功能,這裏把它分爲5個部分。java 數據採集 ETL 數據分析 數據導出 數據展示 下面咱們來一個一個的詳細介紹 首先是數據採集: 數據採集有多種方式:能夠經過shell腳本、java程序、flume等方式,能夠根據不一樣的業務需求來選擇 shell腳本:適合一些簡單的業務邏輯,輕量級的,但對日誌採
相關文章
相關標籤/搜索