Kafka Connect HDFS

概述 Kafka 的數據如何傳輸到HDFS？如果仔細思考，會發現這個問題並不簡單。 不妨先想一下這兩個問題? 1）爲什麼要將Kafka的數據傳輸到HDFS上？ 2）爲什麼不直接寫HDFS而要通過Kafka? HDFS一直以來是爲離線數據的存儲和計算設計的，因此對實時事件數據的寫入並不友好，而Kafka生來就是爲實時數據設計的，但是數據在Kafka上無法使用離線計算框架來作批量離線分析。 那麼，Ka

>>阅读原文<<