把kafka中topic的數據上傳到hdfs

kafka中topic的數據上傳到hdfs中,需要先上傳幾個jar包到flume下的lib中 然後配置kafka-hdfs的配置文件 最後在flume中運行  bin/flume-ng agent -c conf/ -f conf/kafka-hdfs.conf -n agent -Dflume.root.logger=INFO,console 即能把數據商城到hdfs指定的目錄中
相關文章
相關標籤/搜索