windows安装运行zookeeper,kafka

第一、安装JAVA JDK

1.下载安装包

http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

2.添加系统变量

JAVA_HOME=C:\Program Files (x86)\Java\jdk1.8.0_144

第二、安装Zookeeper

1.下载安装包

http://zookeeper.apache.org/releases.html#download

2.解压目录  D:\zookeeper-3.4.14

3.将"zoo_sample.cfg"重命名为"zoo.cfg"，并编辑dataDir

 4.添加系统变量

6.编辑path系统变量

默认端口2181

打开cmd输入zkserver，先不要关闭这个窗口

第三、安装kafka

下载安装包

http://kafka.apache.org/downloads

注意要下载二进制版本

 解压注意上面是我第一次下载的kafka安装包解压后的文件，但是这个没能成功。从网上查找发现应该下载二进制版本。

下图中我修改了目录E:\kafka_2.12-2.1.0\config 下的  server.peoperties文件中的日志的输出路径

 

上诉zookeeeper的默认端口我没有修改 ，而这里E:\kafka_2.12-2.1.0\config 下的  server.peoperties文件中的默认也是连接本地的zookeeper并且端口也是默认的2181

 

kafka会按照默认，在9092端口上运行，并连接zookeeper的默认端口2181

注意：如果启动的过程中遇到

[Kafka][错误: 找不到或无法加载主类 Files\Java\jdk1.8.0_101\lib\dt.jar;C:\Program]

去修改E:\kafka_2.12-2.1.0\bin\windows\kafka-run-class.bat

 

如下图，在如下目录里输入cmd接着输入如下命令

.\bin\windows\kafka-server-start.bat .\config\server.properties


或

./kafka-server-start.sh ../config/server.properties &

 注意这个窗口不要关闭，启用kafka前要确保ZooKeeper实例已经准备好并在运行

第四、测试

1.创建主题，进入Kafka安装目录E:\kafka_2.12-2.1.0 输入cmd，接下来输入下列命令，注意窗口不要关闭

.\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

查看主题输入命令

.\bin\windows\kafka-topics.bat --list --zookeeper localhost:2181

 

2.创建生产者，进入Kafka安装目录E:\kafka_2.12-2.1.0 输入cmd，接下来输入下列命令，注意不要关闭窗口

.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test

3.创建消费者，进入Kafka安装目录E:\kafka_2.12-2.1.0 输入cmd，接下来输入下列命令

.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test --from-beginning

下面会实时更新根据，创建的消费者会根据创建的生产者输入的内容变化