基於HDP使用Flume實時採集MySQL中數據傳到Kafka+HDFS或Hive

環境版本: HDP-2.5.3 注意:HDP中Kafka broker的端口是6667,不是9092 若是隻sink到kafka請看這篇:基於HDP使用Flume採集MySQL中數據傳到Kafkahtml 前言 有兩種方式能夠將數據經過flume導入hive中,一是直接sink到hive中,二是sink到hdfs中,而後在hive中建個外部表。直接sink到hive中相對麻煩一些,須要加入須要的j
相關文章
相關標籤/搜索