大數據實時分析架構

flume+kafka+sparkstream+hbase 實時分析架構 整體架構 各個業務系統的消息源多種多樣，使用 flume 作爲消息的採集端，有一定的擴展性，採集的消息發往hdfs直接保存和消息管道進行實時計算。中間傳輸層採用Kakfa，能夠支撐海量數據的數據傳遞。將消息持久化到磁盤中，並對消息創建了備份保證了數據的安全。Kafka在保證了較高的處理速度的同時，又能保證數據處理的低延遲和數

>>阅读原文<<