部署數據環境(flume)

flume連接kafka flume(日誌收集器):通過一個配置文件定義一個代理 配置文件: (1).source :從哪裏過來 (2).sink:數據流向哪裏 (3)通道:通過通道輸出。使用內存傳數據比較慢。如果數據傳的快過內存,就會堵塞,爲了解決瓶頸問題,我們使用kafka,kafka輸出的比較塊。但是如果通過網絡傳輸就會慢下來。所以這個時候就有另外一辦法解決這個問題。就是收集日誌,定義一堆分
相關文章
相關標籤/搜索