Flume+kafka+flink+es 構建大數據實時處理

大數據目前的處理方法有兩種：一種是離線處理，一種是實時處理。如何構建我們自己的實時數據處理系統我們選用flume+kafka+flink+es來作爲我們實時數據處理工具。因此我們的架構是： flume集羣 kafka集羣 flink集羣 es集羣 其具體架構如圖   對於flume集羣，它的作用就是採集數據並將數據提供給kafka集羣，我們可以通過topic來實現。 對於zookeeper-kaf

>>阅读原文<<