詳解scribe+flume搭建高可用的負載均衡日誌收集系統入hadoop和kafka

1、系統架構 爲加強系統的可靠性，flume系統分爲agent層和collector層java agent層是每一個每一個須要收集日誌的主機，有若干臺，可自由擴展；每臺agent機器運行一個carpenter程序將相應目錄下的日誌信息發送給本機上的flume source，對應avro sink將數據推送到兩臺collector（採用均衡負載的方式推送，若其中一臺collector故障則所有推送給

>>阅读原文<<