linux(centos)部署kafka(单点快速开始；单机器部署集群；多机器部署集群)

原创

已于 2024-03-12 10:44:50 修改 · 1.5k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#linux #centos

于 2021-01-20 11:31:05 首次发布

转载请注明出处：linux(centos)部署kafka(单点快速开始；单机器部署集群；多机器部署集群)_centos 部署kafka 3.5集群-优快云博客

注意：

1、单台机器上又部署zk，又部署kafka，比较吃内存，一开始可能还好，能启动起来，但是内存不够的话，后面可能用着用着kafka就挂掉一个节点。

2、我这里在进行集群部署的时候只部了三个，不过实际使用的时候最好部署五个，避免一个节点挂掉之后，剩下两个争夺主，而导致不可用。

下载解压

#下载解压
#wget https://mirrors.bfsu.edu.cn/apache/kafka/2.6.0/kafka_2.13-2.6.0.tgz
#域名变了
wget https://archive.apache.org/dist/kafka/2.6.0/kafka_2.13-2.6.0.tgz
tar -xvzf kafka_2.13-2.6.0.tgz
cd kafka_2.13-2.6.0

单点快速开始

#后台启动zk
#注：单点启动的zk配置文件用默认的就好了,也可以进去改一下dataDir，dataLogDir，clientPort啥的
#注：可以先用bin/zookeeper-server-start.sh config/zookeeper.properties前台启动
#看一看是否有报错
nohup bin/zookeeper-server-start.sh config/zookeeper.properties &

#修改配置文件中的几个配置项
vim config/server.properties
#监听地址：如果没有配置默认为localhost:9092
listeners=PLAINTEXT://你的ip:9092
#日志路径
log.dirs=/tmp/kafka-logs
#连接zk的地址，如果上面zk的配置文件改了这里也要改
zookeeper.connect=localhost:2181
#partitions数量
num.partitions=10
#自动创建主题，可选项，自己决定是否设置
auto.create.topics.enable=true
#factor的几个相关参数:
#注：这些参数默认为1，但是如果搭建单点的时候该大，启动就会报错
offsets.topic.replication.factor=1
transaction.state.log.replication.factor=1
default.replication.factor=1

#后台启动kafka
#同样可以前台先启动看一下日志
nohup bin/kafka-server-start.sh config/server.properties &

#搭建完要进行测试哦！！！！！