kafka_2.11-1.0.0单机和集群的安装和配置

最新推荐文章于 2025-06-29 09:21:18 发布

原创

最新推荐文章于 2025-06-29 09:21:18 发布 · 4.9k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#vim #zookeeper

本文详细介绍了如何在单机上安装配置Kafka 2.11-1.0.0，包括下载安装包、编辑server.properties配置文件，重点强调了Kafka依赖Zookeeper但不推荐使用内置集群。同时，提供了启动Zookeeper集群的链接和启动Kafka集群、创建与管理topic、启动producer和consumer的步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

单机安装配置：

首先下载kafka安装包
tar -zxvf kafka安装包
cd config
vim server.properties

kafka需要zookeeper进行管理
kafka有一个内置的zookeeper集群，建议不用

server.properties中的内容解释：

broker.id=0  #当前机器在集群中的唯一标识，和zookeeper的myid性质一样
port=19092 #当前kafka对外提供服务的端口默认是9092
host.name=192.168.7.100 #这个参数默认是关闭的，在0.8.1有个bug，DNS解析问题，失败率的问题。
num.network.threads=3 #这个是borker进行网络处理的线程数
num.io.threads=8 #这个是borker进行I/O处理的线程数
log.dirs=/opt/kafka/kafkalogs/ #消息存放的目录，这个目录可以配置为“，”逗号分割的表达式，上面的num.io.threads要大于这个目录的个数这个目录，如果配置多个目录，新创建的topic他把消息持久化的地方是，当前以逗号分割的目录中，那个分区数最少就放那一个
socket.send.buffer.bytes=102400