大數據工程師的日常工作內容是幹嘛?

大數據工程師工作內容取決於你工作在數據流的哪一個環節。 從數據上游到數據下游,大致可以分爲: 數據採集 -> 數據清洗 -> 數據存儲 -> 數據分析統計 -> 數據可視化 等幾個方面 工作內容當然就是使用工具組件(Spark、Flume、Kafka等)或者代碼(Java、Scala等)來實現上面幾個方面的功能。   具體說說吧, 數據採集: 業務系統的埋點代碼時刻會產生一些分散的原始日誌,可以用
相關文章
相關標籤/搜索