大數據處理中的實時流式處理

大數據的實時流式處理問題的特點 數據源源不斷的到來; 數據需要儘快的得到處理,不能產生積壓; 處理之後的數據量依然巨大,仍然後TB級甚至PB級的數據量; 處理的結果能夠儘快的展現; 以上四個特點可以總結爲 數據的收集->數據的傳輸->數據的處理->數據的展現 其中數據的處理一般涉及數據的聚合,數據的處理和展現能夠在秒級或者毫秒級得到響應。針對這些問題目前形成了 Flume + kafka + St
相關文章
相關標籤/搜索