kafka+zookeeper搭建简单集群

最新推荐文章于 2025-01-06 08:57:03 发布

一纸情书ベ

最新推荐文章于 2025-01-06 08:57:03 发布

阅读量259

点赞数 1

分类专栏： kafka

本文链接：https://blog.youkuaiyun.com/weixin_45762569/article/details/103199470

版权

本文介绍了如何在三台服务器上搭建Kafka集群，首先强调了Zookeeper在Kafka集群中的重要性，然后详细步骤包括：安装Java环境，配置JDK，下载Zookeeper和Kafka，设置配置文件，创建myid文件，启动Zookeeper集群。接着，文章讲解了Kafka的基本概念，如主题、分区、消息、生产者和消费者，并描述了启动Kafka集群的步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

简单介绍：
因为Kafka集群是把状态信息保存在Zookeeper中的，并且Kafka的动态扩容是通过Zookeeper来实现的，所以需要优先搭建Zookeerper集群，建立分布式状态管理。开始准备环境，搭建集群：
zookeeper是基于Java环境开发的所以需要先安装Java 然后这里使用的zookeeper安装包版本为zookeeper-3.4.14，Kafka的安装包版本为kafka_2.11-2.2.0。
AMQP协议：Advanced Message Queuing Protocol （高级消息队列协议）是一个标准开放的应用层的消息中间件协议。AMQP定义了通过网络发送的字节流的数据格式。因此兼容性非常好，任何实现AMQP协议的程序都可以和与AMQP协议兼容的其他程序交互，可以很容易做到跨语言，跨平台。
1、准备三台服务器,推荐每台2个G，记得关闭防火墙
server1：10.0.0.41
server2：10.0.0.42
server3：10.0.0.43
2、三台都得配置jdk环境，1.8以上，并且配置主机名
在这里插入图片描述
10.0.0.41
hostname kafka01
10.0.0.42
hostname kafka02
10.0.0.43
hostname kafka03