大數據之路~第一章 總述

    接下來,我們以阿里巴巴大數據架構圖來介紹。     大數據系統體系分爲數據採集層、數據計算層、數據服務層和數據應用層。簡單介紹一下這四層的具體作用和使用到的技術(講述的內容包含但不限於阿里巴巴的知識):     1 數據採集層          數據採集的對象主要是傳統數據庫數據和日誌數據。一般公司採用sqoop開源工具採集傳統數據庫數據,大公司會開發專門工具。例如,阿里的DataX和同步
相關文章
相關標籤/搜索