Kafka Connect HDFS

概述 Kafka 的數據如何傳輸到HDFS?如果仔細思考,會發現這個問題並不簡單。 不妨先想一下這兩個問題? 1)爲什麼要將Kafka的數據傳輸到HDFS上? 2)爲什麼不直接寫HDFS而要通過Kafka? HDFS一直以來是爲離線數據的存儲和計算設計的,因此對實時事件數據的寫入並不友好,而Kafka生來就是爲實時數據設計的,但是數據在Kafka上無法使用離線計算框架來作批量離線分析。 那麼,Ka
相關文章
相關標籤/搜索