採集kafka數據以orc格式寫往hdfs

1.需求，從kafka採集數據而後以orc格式的文件寫往hdfs。而後hdfs上的表以orc格式存儲，而後綁定分區能夠查詢出數據。java   2.解決需求apache     1） 使用flume 採集。寫完hdfs。可是沒法寫orc格式。bootstrap     2 )  logstach 能夠寫往hdfs。可是沒法寫orc格式。api      3) datax 沒有用過 不知道能不能寫o

>>阅读原文<<