confluent-5.0.0搭建kafka集群环境(三实例)

最新推荐文章于 2025-04-15 14:22:45 发布

dragonlicat

最新推荐文章于 2025-04-15 14:22:45 发布

阅读量1.7k

点赞数 1

分类专栏： kafka 文章标签： kafka

本文链接：https://blog.youkuaiyun.com/u011935048/article/details/105319515

版权

本文介绍了如何在环境中准备并使用confluent-5.0.0来搭建一个包含zookeeper、kafka和schema-registry组件的Kafka集群。详细步骤包括解压部署包、配置各个组件（如zookeeper的日志打印配置和kafka的数据目录初始化）、启动服务以及通过kafka-manager和schema-registry-ui进行可视化管理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

环境准备

服务器：

服务器	部署组件
dragonlicat	zookeeper kafka schema-registry
dragonlicat02	zookeeper kafka schema-registry
dragonlicat03	zookeeper kafka schema-registry

部署软件包：confluent-oss-5.0.0-2.11.tar.gz
kafka可视化界面：kafka-manager-2.0.0.2【CMAK-2.0.0.2】
schema可视化界面：schema-registry-ui 【schema-registry-ui】
部署目录： /appdata/
zookeeper数据目录：/appdata/confluent-data/zookeeper-data
kafka 数据目录：/appdata/confluent-data/kafka-data

部署配置

解压部署包

#dragonlicat dragonlicat02 dragonlica03
tar -zxf confluent-oss-5.0.0-2.11.tar.gz -C /appdata
cd /appdata/confluent-5.0.0
ls -lrt

总用量 12
drwxr-xr-x  2 root root 4096 4月   4 22:48 bin
drwxr-xr-x 17 root root 4096 4月   4 22:48 etc
drwxr-xr-x  3 root root   21 4月   4 22:48 lib
-rw-r--r--  1 root root  871 4月   4 22:48 README
drwxr-xr-x  2 root root   21 4月   4 22:48 sbin
drwxr-xr-x  6 root root   71 4月   4 22:48 share
drwxr-xr-x  2 root root  313 4月   4 22:48 src

配置文件明细

zookeeper 配置文件目录：confluent-5.0.0/etc/kafka/zookeeper.properties
kafka 配置文件目录：confluent-5.0.0/etc/kafka/server.properties
zookeeper kafka 日志配置文件：confluent-5.0.0/etc/kafka/log4j.properties
schema-registry配置文件目录：confluent-5.0.0/etc/schema-registry/schema-registry.properties
schema-registry 日志配置文件目录：confluent-5.0.0/etc/schema-registry/log4j.properties

zookeeper组件配置

zookeeper配置文件

#dragonlicat dragonlicat02 dragonlica03
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just
# example sakes.
dataDir=/appdata/confluent-data/zookeeper-data
# the port at which the clients will connect
clientPort