Kafka安装之一 Zookeeper

最新推荐文章于 2025-06-08 16:21:30 发布
最新推荐文章于 2025-06-08 16:21:30 发布
阅读量2.2k 收藏 2
点赞数
CC 4.0 BY-SA版权
分类专栏： Kafka 文章标签： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wuwei928/article/details/80281021
Kafka安装之一  Zookeeper

Kafka安装之二 在CentOS 7上安装Kafka

Kafka安装之三 spring-kafka实践

一 、 Zookeeper 概述        

       ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。
        ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户。
       
       Zookeeper的官方网站可以学习： http://zookeeper.apache.org/

 

二、下载Zookeeper

        在官网的Getting Started 点击Download，进入下载界面。下载稳定版3.4.12

 

三、安装Zookeeper

      将下载的Zookeeper包上传到linux服务器

        2.1 解压Zookeeper

            进入linux目录，解压Zookeeper .gz文件，执行解压命令：

             tar    -zxvf    zookeeper-3.4.10.tar.gz

              

 

        2.2 配置Zookeeper

             Zookeeper需要一个名为zoo.cfg的配置文件，我们解压后，得到的是官方的示例文件，名为zoo_sample.cfg，这个文件在zookeeper根目录的conf子目录下。如果我们想使用默认配置，直接将该文件复制并且改名即可。里面可以配置端口号，是否启用集群等等，          这里我们直接复制。

             

 

        命令是：

        cp    /home/zookeeper/zookeeper-3.4.10/conf/zoo_sample.cfg        /home/zookeeper/zookeeper-3.4.10/conf/zoo.cfg  

              

        2.3  启动以及停止Zookeeper

               进入到zookeeper的bin目录下 执行zkServer.sh脚本进行启动，命令是：

               ./zkServer.sh   start

              

             停止命令：

              ./zkServer.sh   Stop

             状态命令：

             ./zkServer.sh   Status

             

【kafka专栏】不用zookeeper怎么安装kafka集群-最新kafka3.0版本
字母哥博客
06-22 3990
在kafka3.0中已经可以将zookeeper去掉，kafka集群不再必须依赖zookeeper，这为运维强度的下降提供了非常多的帮助。本文为大家介绍kafka3.0，不用zookeeper如何进行集群的安装。
Kafka+Zookeeper集群安装及部署
weixin_45203131的博客
05-07 392
参考网址：https://www.cnblogs.com/saneri/p/8762168.html 环境：三台Centos7.6 192.168.1.10 Kafka+ZooKeeper 192.168.1.11 Kafka+ZooKeeper 192.168.1.12 Kafka+ZooKeeper 安装包下载： [root@localhost ~]# wg...
Kafka安装之一 Zookeeper
weixin_30835649的博客
05-11 208
一 、 Zookeeper概述 ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。 ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易...
zookeeper+kafka消息队列群集部署
最新发布
专注于系统运维、数据库、DevOps、虚拟化技术、docker、kubernetes、等云原生技术。
06-08 1206
消息队列（Message Queue）是一种应用间的通信方式，消息发送后可以立即返回，由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁来取，消息使用者只管从 MQ 中取消息而不管是谁发布的。这样发布者和使用者都不用知道对方的存在。
zookeeper与kafka安装
君君的专栏
11-21 1565
AMQP协议 kafka是基于仿AMQP协议开发的，AMQP协议模型如下： 基本概念： 消费者（consumer）：从消息队列中请求消息的客户端应用程序 生产者（producer）：想broker发布消息的客户端应用程序 AMQP服务端（broker）：用来接收生产者发送的消息并将这些消息路由给服务器中的队列 主题（topic）：类似新闻中的分类概念，在实际开发中通常一个业务一个主题 分区（pa
CentOS 7 安装Kafka和Zookeeper
weixin_44940604的博客
10-09 269
下载 https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/ http://mirror.bit.edu.cn/apache/zookeeper/ 安装配置 Kafka 解压 配置文件在conf目录下，主要配置是server.properties、 producer.properties和consumer.properties；而kafka启动的配置文件是server.properties。 ##每一个broker在集群中的唯一标示，要求是正数。在改变IP地
Zookeeper以及kafka的安装（Kafka依赖于）
2301_77329325的博客
11-11 602
从名字上直译就是动物管理员，动物指的是 Hadoop 一类的分布式软件，管理员三个字体现了 ZooKeeper 的特点：维护、协调、管理、监控。
kafka安装 docker安装kafka zookeeper
08-26
3.6.docker安装 kafka 参数解释： -d ：后台运行 – name 当前容器的名字。 -p：暴露端口，-p 9092:9092 将容器内部的9092端口映射到宿主机的端口上。 –privileged：使用该参数，container内的root拥有真正的root...
Kafka和Zookeeper的安装与使用指南
AngelCryToo的专栏
08-09 1219
在分布式系统的世界中，Kafka是一种高性能的消息队列系统，而Zookeeper则作为分布式协调服务的基础工具之一，为Kafka的高效运行提供支持。本指南将详细介绍在Windows和Linux系统中安装和配置Zookeeper和Kafka的步骤，并包含一些常用命令和经验总结，帮助你更好地掌握这些工具。
Kafka安装配置（Zookeeper已在阵中）
weixin_44280043的博客
05-10 392
cd /#之后还会有很多大数据组件，统一放在这个文件夹下#创建application文件夹，大数据任务都放在里面，不同组件用不同的文件夹#下面文件夹先创建后，在后续配置config会用到，配置flink运行时的数据到对应位置。
Kafka-3.3.4摒弃zookeeper集群部署操作文档
2301_77356579的博客
05-02 3205
Kafka-3.3.4摒弃zookeeper集群部署操作文档
kafka+zookeeper安装教程
12-21
kafka+zookeeper集群安装详细教程，有需要的可以下载，并实际操作一下。
zookeeper、kafka
05-10
zookeeper以及kafka部署，linux、Windows操作系统均可使用
kafka/zookeeper 安装
newbrid007的博客
03-09 308
1.第一步下载kafka 和zookeeper i.地址：http://kafka.apache.org/downloads -2.7-scala-2.12 https://zookeeper.apache.org/releases.html -3.6.2 注意下一般高版本向下兼容选择完kafka的版本后尽量要匹配版本 下载的时候注意 要下载 文件名里面带有xxxxx.xx-bin.tar.gz的类似的但是要下载bin的开箱解压就可以用 2.解压文件 tar -zxvf xxxx.kafka-2
zookeeper和kafka安装
m0_37767351的博客
03-18 234
zookeeper和kafka安装
kafka安装（包含Zookeeper 安装）
JimmyYang的博客
06-28 1062
安装kafka 和 zookeeper
安装Zookeeper+kafka
娜娜的专栏
03-24 922
Kafka 使用Zookeeper 保存集群的元数据信息和消费者信息。安装目录为 /usr/local/zookeeper-3.4.11解压：[root@U10-33 local]# tar -zxf zookeeper-3.4.11.tar.gz配置文件(zoo.cfg):[root@U10-33 ~]# cd /usr/local/zookeeper-3.4.11/conf/ [root@U1...
【Kafka】Linux安装zookeeper&kafka
wssf001的博客
02-18 1802
此文基于debian12，centos也适用 因为zookeeper依赖jdk环境 预先安装好jdk。
Kafka-JDK与Zookeeper安装部署
03-04
<think>好的，我现在需要给用户介绍Kafka、JDK和Zookeeper的安装部署步骤。首先，我得确认自己对这些组件的理解是否正确，以及它们之间的关系。Kafka是一个分布式流处理平台，依赖Zookeeper进行元数据管理和协调，而JDK是运行Java应用的基础，所以安装Kafka前需要先安装JDK和Zookeeper。 接下来，我需要分步骤整理安装流程。首先应该是JDK的安装，用户需要检查是否已经安装了Java，如果没有的话，要下载合适的版本，配置环境变量。然后是Zookeeper的安装，包括下载、配置、启动和验证。最后是Kafka的安装，同样需要下载、配置、启动，并进行测试。 在整理过程中，需要注意各个组件的版本兼容性。比如Kafka的不同版本可能对Zookeeper有不同要求，尤其是新版本Kafka可能不再依赖Zookeeper，但用户这里提到的是Kafka-JDK，可能还是需要传统搭配。因此，应该选择一个兼容的组合，例如Kafka 2.13-3.5.1和Zookeeper 3.8.3，JDK 11或17，确保版本匹配。 另外，配置文件的细节需要准确。比如Zookeeper的dataDir和clientPort，Kafka的server.properties中的zookeeper.connect、listeners等参数。这些配置如果有误会导致服务无法启动，所以必须仔细检查。 还要考虑用户可能是在Linux环境下部署，所以步骤中的命令和路径都是基于Linux系统的。例如，使用wget下载，tar解压，systemd服务配置等。如果用户使用其他系统，可能需要调整，但问题中没有特别说明，所以默认按Linux处理。 在启动服务部分，Zookeeper和Kafka都需要以后台服务运行，可能需要编写systemd的unit文件，或者使用nohup命令。这部分需要详细说明，确保用户能够正确启动并验证服务状态。 测试部分，需要指导用户如何创建主题、发送和接收消息，以验证Kafka是否正常工作。这包括使用Kafka自带的命令行工具，如kafka-topics.sh、kafka-console-producer.sh和kafka-console-consumer.sh。 可能还需要提醒用户注意防火墙设置，确保端口开放，比如Zookeeper的2181，Kafka的9092。另外，数据目录的权限问题，避免因权限不足导致服务启动失败。 总结下来，步骤应该分为三个主要部分：JDK安装、Zookeeper安装、Kafka安装，每个部分包含下载、配置、启动和验证。同时，需要给出具体的命令和配置示例，确保用户能够一步步执行。最后，测试整个环境是否正常，确保安装成功。</think>以下是Kafka、JDK与Zookeeper的安装部署步骤详解： --- ### 一、JDK安装部署 **1. 检查现有Java环境** ```bash java -version ``` 若无Java环境则继续安装 **2. 下载JDK** 推荐JDK 11或17（以JDK17为例）： ```bash wget https://download.oracle.com/java/17/latest/jdk-17_linux-x64_bin.tar.gz ``` **3. 解压安装** ```bash tar -zxvf jdk-17_linux-x64_bin.tar.gz -C /usr/local/ ``` **4. 配置环境变量** ```bash vim /etc/profile ``` 添加以下内容： ```bash export JAVA_HOME=/usr/local/jdk-17 export PATH=$JAVA_HOME/bin:$PATH ``` 使配置生效： ```bash source /etc/profile ``` --- ### 二、Zookeeper安装部署 **1. 下载安装包** ```bash wget https://archive.apache.org/dist/zookeeper/zookeeper-3.8.3/apache-zookeeper-3.8.3-bin.tar.gz ``` **2. 解压安装** ```bash tar -zxvf apache-zookeeper-3.8.3-bin.tar.gz -C /opt/ cd /opt/apache-zookeeper-3.8.3-bin ``` **3. 配置zoo.cfg** ```bash cp conf/zoo_sample.cfg conf/zoo.cfg vim conf/zoo.cfg ``` 修改关键配置： ```properties dataDir=/var/lib/zookeeper clientPort=2181 ``` **4. 启动服务** ```bash bin/zkServer.sh start ``` 验证状态： ```bash bin/zkServer.sh status ``` --- ### 三、Kafka安装部署 **1. 下载安装包** ```bash wget https://downloads.apache.org/kafka/3.5.1/kafka_2.13-3.5.1.tgz ``` **2. 解压安装** ```bash tar -zxvf kafka_2.13-3.5.1.tgz -C /opt/ cd /opt/kafka_2.13-3.5.1 ``` **3. 修改配置文件** ```bash vim config/server.properties ``` 关键配置项： ```properties broker.id=0 listeners=PLAINTEXT://:9092 log.dirs=/tmp/kafka-logs zookeeper.connect=localhost:2181 ``` **4. 启动Kafka** ```bash bin/kafka-server-start.sh -daemon config/server.properties ``` **5. 验证服务** 创建测试主题： ```bash bin/kafka-topics.sh --create --topic test --bootstrap-server localhost:9092 ``` 查看主题列表： ```bash bin/kafka-topics.sh --list --bootstrap-server localhost:9092 ``` --- ### 四、服务管理（Systemd配置） **1. Zookeeper服务文件** ```bash vim /etc/systemd/system/zookeeper.service ``` 内容示例： ```ini [Unit] Description=Zookeeper Service [Service] ExecStart=/opt/apache-zookeeper-3.8.3-bin/bin/zkServer.sh start-foreground Restart=always [Install] WantedBy=multi-user.target ``` **2. Kafka服务文件** ```bash vim /etc/systemd/system/kafka.service ``` 内容示例： ```ini [Unit] Requires=zookeeper.service After=zookeeper.service [Service] ExecStart=/opt/kafka_2.13-3.5.1/bin/kafka-server-start.sh /opt/kafka_2.13-3.5.1/config/server.properties Restart=on-failure [Install] WantedBy=multi-user.target ``` --- ### 五、注意事项 1. 版本兼容性：Kafka 3.x建议搭配Zookeeper 3.5+ 2. 生产环境需配置： - 多节点集群部署 - 数据目录持久化存储 - 安全认证机制（SASL/SSL） 3. 端口开放： - Zookeeper: 2181, 2888, 3888 - Kafka: 9092 4. 日志管理：建议修改log.dirs到独立磁盘分区 可通过`jps`命令验证Java进程是否包含： - QuorumPeerMain（Zookeeper） - Kafka（Kafka Broker）
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值