把kafka中topic的数据上传到hdfs

kafka中topic的数据上传到hdfs中,需要先上传几个jar包到flume下的lib中 然后配置kafka-hdfs的配置文件 最后在flume中运行  bin/flume-ng agent -c conf/ -f conf/kafka-hdfs.conf -n agent -Dflume.root.logger=INFO,console 即能把数据商城到hdfs指定的目录中
相关文章
相关标签/搜索