基於Flume的美團日誌收集系統(二)改進和優化

在前文中，我們詳述了基於Flume的美團日誌收集系統的架構設計，以及爲什麼做這樣的設計。在本節中，我們將會講述在實際部署和使用過程中遇到的問題，對Flume的功能改進和對系統做的優化。 1 Flume的問題總結 在Flume的使用過程中，遇到的主要問題如下： a. Channel「水土不服」：使用固定大小的MemoryChannel在日誌高峯時常報隊列大小不夠的異常；使用FileChannel又導

>>阅读原文<<