本地windows下新建kafka生产消费数据

Kafka的运行依赖于Zookeeper,因此在运行Kafka以前咱们须要安装并运行Zookeeper html

1.安装zookeepershell

1.1 下载安装文件: http://mirror.bit.edu.cn/apache/zookeeper/
1.2 解压文件(本文解压到 D:\zookeeper-3.4.8)
1.3 打开D:\zookeeper-3.4.8\conf,把zoo_sample.cfg重命名成zoo.cfg
1.4 从文本编辑器里打开zoo.cfg
1.5 修改dataDir和dataLogDir保存路径
dataDir=D:\logs\zookeeper
dataLogDir=D:\data\logs\zookeeper
1.6 添加以下系统变量:ZOOKEEPER_HOME: D:\zookeeper-3.4.8
Path: 在现有的值后面添加 ;%ZOOKEEPER_HOME%\bin;
2.cmd运行zookeeper
apache

运行Zookeeper: 打开cmd而后执行zkserver 命令。若是打印如下信息则表示zookeeper已经安装成功并运行在2181端口。bootstrap

截图好像报错了·~~windows

2.安装并运行Kafka
2.1 下载安装文件: http://kafka.apache.org/downloads.html
2.2 解压文件(本文解压到 D:\kafka_2.11-0.10.2.0)
2.3 打开D:\kafka_2.11-0.10.2.0\config\ server.properties
2.4 把 log.dirs的值改为 log.dirs=D:\data\logs\kafka
2.5 D:\kafka_2.11-0.10.2.0\bin文件夹下的.sh命令脚本是在shell下运行的,此文件夹下还有个 windows文件夹,里面是windows下运行的.bat命令脚本
2.6 在D:\kafka_2.11-0.10.2.0文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口
2.7 输入并执行一下命令以打开kafka:(根据实际状况能够进行适当的路径修改)
.\bin\windows\kafka-server-start.bat .\config\server.properties编辑器

3.建立topics
3.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口spa

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test1029
4.打开一个Producer
4.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口code

kafka-console-producer.bat --broker-list localhost:9092 --topic test1029
5.打开一个Consumer
5.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口server

关于最后消费者启动的方法,目前已通过时,0.90版本以后启动消费者的方法:,kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test0811 --from-beginning

注意:以上打开的窗口不要关闭
而后就能够在Producer控制台窗口输入消息了。在消息输入事后,很快Consumer窗口就会显示出Producer发送的消息htm

相关文章
相关标签/搜索