關於數據中臺的深度思考與總結

數據中臺   數據匯聚 數據匯聚是數據中臺必須提供的核心工具,把各種異構網絡、異構數據源的數據方便地採集到數據中臺中進行集中存儲,爲後續的加工建模做準備。數據匯聚方式一般有數據庫同步、埋點、網絡爬蟲、消息隊列等;從匯聚的時效性來分,有離線批量匯聚和實時採集。 數據採集工具 Canal、DataX、Sqoop 數據開發 數據開發模塊主要面向開發人員、分析人員,提供離線、實時、算法開發工具。 離線開發
相關文章
相關標籤/搜索