采集kafka数据以orc格式写往hdfs

1.需求，从kafka采集数据而后以orc格式的文件写往hdfs。而后hdfs上的表以orc格式存储，而后绑定分区能够查询出数据。java   2.解决需求apache     1） 使用flume 采集。写完hdfs。可是没法写orc格式。bootstrap     2 )  logstach 能够写往hdfs。可是没法写orc格式。api      3) datax 没有用过 不知道能不能写o

>>阅读原文<<