使用EMR-Flume同步Kafka數據到HDFS

使用EMR-Flume同步Kafka數據到HDFS 1. 背景 Flume是一個分佈式、可靠和高效的數據匯聚系統，其source、channel和sink的結構設計，不僅實現了數據生產者與消費者的解耦，還提供了數據緩衝的功能。Flume支持多種source、channel和sink，也可以實現自定義source、channel和sink並以插件的方式加入Flume中。同時，Flume也支持數據處理

>>阅读原文<<