大數據實時分析架構

flume+kafka+flink+hbase 實時分析架構## 總體架構 各個業務系統的消息源多種多樣,使用 flume 做爲消息的採集端,有必定的擴展性,採集的消息發往hdfs直接保存和消息管道進行實時計算。中間傳輸層採用Kakfa,可以支撐海量數據的數據傳遞。將消息持久化到磁盤中,並對消息建立了備份保證了數據的安全。Kafka在保證了較高的處理速度的同時,又能保證數據處理的低延遲和數據的零丟
相關文章
相關標籤/搜索