數據處理流程

 流程圖解析   典型的BI系統體流程如下:   由於是處理海量數據,流程中各環節所使用的技術則跟傳統BI完全不同,後續課程都會一一講解:   1) 數據採集:定製開發採集程序,或使用開源框架FLUME   2) 數據預處理:定製開發mapreduce程序運行於hadoop集羣   3) 數據倉庫技術:基於hadoop之上的Hive   4) 數據導出:基於hadoop的sqoop數據導入導出工具
相關文章
相關標籤/搜索