初識實時流處理

這是實時流處理的一般架構,我們在手機或者是網站上的訪問或搜索操作都會有一條日誌信息記錄到WebServer上,之後我們 藉助日誌收集框架Flume把實時的日誌收集過來,再通過消息隊列Kafka傳入到Spark/Storm,這裏的Kafka起到一個緩衝作用,業務邏輯完成後,將結果寫入到數據庫中,最後通過前端可視化把結果展示。
相關文章
相關標籤/搜索