搭建kafka环境

最新推荐文章于 2024-07-03 15:22:35 发布

原创最新推荐文章于 2024-07-03 15:22:35 发布 · 220 阅读

0 ·

CC 4.0 BY-SA版权

安装部署同时被 2 个专栏收录

23 篇文章

订阅专栏

大数据实战

19 篇文章

订阅专栏

本文详细介绍了如何从解压安装包开始，逐步完成Zookeeper和Kafka的配置与环境搭建过程。包括配置zoo.cfg，设置zk_home环境变量，创建kafka日志存放目录，编辑server.properties等关键步骤，并提供了测试kafka功能，创建主题，以及生产者和消费者的使用方法。

查看就可以得到已经解压好的安装包

进到配置文件，对zoo.cfg进行配置

zookeeper下面创建一个zk_data，然后编辑zoo.cfg将其路径拷贝给dataDir

然后在配置环境中进行配置zk_home

然后接着安装kafka

先到kafka下面创建一个ka_data作为日志存放地方

进到kafka的配置文件中，编辑 vi server.properties

kafka环境搭建后，测试kafka是否好用

再打开一个窗口创建kafka的主题

创建生产者进行生产数据

继续打开另一个窗口(创建消费者消费数据)

--zookeeper是一个过时的方法，原来在最新的版本中，这种启动方式已经被删除了

启动
 ./kafka-server-start.sh ../config/server.properties 
创建主题，分区
 ./kafka-topics.sh --create --zookeeper 127.0.0.1:2181 --partitions 1 --replication-factor 1 --topic test
创建生产者
./kafka-console-producer.sh --broker-list 127.0.0.1:9092 --topic test
创建消费者
 ./kafka-console-consumer.sh --bootstrap-server 127.0.0.1:9092 --topic test --from-beginning