大數據Flume如何進行分層設計？

基於Flume設計實現分層日誌收集系統，到底有什麼好處呢？我們可以先看一下，如果不分層，會帶來哪些問題： 如果需要通過Kafka去緩衝上游基於Flume收集而構建的日誌流，對於數據平臺內部服務器產生的數據還好，但是如果日誌數據是跨業務組，甚至是跨部門，那麼就需要將Kafka相關信息暴露給外部，這樣對Kafka的訪問便不是數據平臺內部可控的 如果是外部日誌進入平臺內部HDFS，這樣如果需要對Hado

>>阅读原文<<