8.zookeeper3.5.7服务端源码解析

最新推荐文章于 2025-05-20 22:23:34 发布
最新推荐文章于 2025-05-20 22:23:34 发布
阅读量267 收藏
点赞数
分类专栏： zookeeper 文章标签： java 服务器 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/woshiwjma956/article/details/125809747
版权
本文深入解析Zookeeper服务端的启动过程，从QuorumPeerMain的main方法开始，涉及配置解析、DatadirCleanupManager的快照清理、ServerCnxnFactory的初始化、QuorumPeer的创建以及选举机制。主要步骤包括数据加载、通信组件启动、选举流程和线程管理，详述了Zookeeper如何确保集群稳定和数据一致性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

zookeeper服务端源码解析

在这里插入图片描述

  1. 服务端以QuorumPeerMain中的main方法 入口作为开始

  2. main方法中执行initializeAndRun作为初始化和启动的核心方法
    在这里插入图片描述

    1. 获取封装zk的配置信息config 底层调用了parseProperties 将配置文件中的各项配置封装到QuorumPeerConfig对象中 用于后期初始化调用获取相关的配置
      在这里插入图片描述
      在这里插入图片描述

    2. DatadirCleanupManager 启动定时任务 对过期的快照删除(默认该功能是关闭的) 默认zk会保留3天的快照
      在这里插入图片描述

  3. 初始化通信组件 runFromConfig

    1. 创建ServerCnxnFatory,默认通过NIO的形式 也支持Netty(NettyServerCnxnFactory) 并调用cnxnFactory.configure完成通信组件的配置启动socke绑定默认端口2181
      在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

  1. 初始化QuorumPeer对象并将config中的各种配置进行设置进去,如myid tickTime等等 并设置zk的存储和通信组件
    在这里插入图片描述

  2. 初始化和启动zk

    1. 初始化 initialize 初始化auth server 和 learner
      在这里插入图片描述

    2. 启动 start 加载zk数据 启动通信组件 开始选举
      在这里插入图片描述

      1. loadDataBase方法负责加载从磁盘中snap快照恢复到内存中 加载事务日志
        在这里插入图片描述

      2. startServerCnxnFactory启动了三个线程 AcceptThread 负责接受新连接并且分配给SelectorThreads线程 SelectorThreads负责处理AcceptThread的链接和IO操作 ConnectionExpirerThread 负责关闭一些session过期的连接
        在这里插入图片描述

      3. startLeaderElection 开始leader选举

        1. 首先判断节点是不是LOOKING状态 默认就是LOOKING 如果是LOOKING状态通过myid 最大事务ID Zxid 和当前Epoch生成选票对象
          在这里插入图片描述

        2. 创建发送选票和接受选举结果的socket
          在这里插入图片描述

        3. 开始选举 创建QuorumCnxManager 用于跟其他zk节点的选票交互 底层使用了FastLeaderElection 作为选举算法
          在这里插入图片描述

    3. 调用join方法将线程挂起

Zookeeper3.5.7源码分析
Shawn的个人博客
01-25 1489
Paxos算法：一种基于消息传递且具有高度容错特性的一致性算法。Paxos算法解决的问题：就是如何快速正确的在一个分布式系统中对某个数据值达成一致，并且保证不论发生任何异常，都不会破坏整个系统的一致性。在一个Paxos系统中，首先将所有节点划分为Proposer（提议者），Acceptor（接受者），和Learner（学习者）。Prepare准备阶段Proposer向多个Acceptor发出Propose请求Promise（承诺）Acceptor针对收到的Propose请求进行Promise（承诺）
Zookeeper总结——知识点、选举机制、客户端操作及写数据流程、API操作、zookeeper分布式锁之 Curator、ZAB协议、CAP理论之zookeeper的CP理论
weixin_44090845的博客
11-19 2317
Zookeeper一、什么是zookeeper1、zookeeper概述2、zookeeper特点3、zookeeper数据结构4、zookeeper应用场景二、Zookeeper本地安装1、本地模式安装2、配置参数解读三、Zookeeper集群操作1、集群操作1.1集群安装1.2 选举机制（面试重点）1.3 ZK集群启动停止脚本2、客户端命令行操作2.1 命令行基本语法2.2 znode节点数据信息2.3 节点类型 一、什么是zookeeper 1、zookeeper概述 Zookeeper是一个开源的
zookeeper-3.5.7:zookeeper原始码解析-源码解析
03-24
阿帕奇ZooKeeper 有关Apache ZooKeeper的最新信息，请访问我们的网站： 和我们的Wiki，位于： 包装/发布文物 使用maven构建项目后，可以从下载或在zookeeper-assembly / target目录中找到。 apache-zookeeper-[version].tar.gz Contains all the source files which can be built by running: mvn clean install To generate an aggregated apidocs for zookeeper-server and zookeeper-jute: mvn javadoc:aggregate (generated files will be at target/site/apido
zookeeper3.5.7源码分析
x18845040365的博客
10-09 379
zookeeper启动源码解析。
ZooKeeper集群的安装
扛麻袋的少年的博客
07-23 2243
ZooKeeper学习笔记（二）： 前提：①Linux服务器(3台) ②已安装JDK ③安装路径：/usr/local/bin目录下 目前3.5.5版本启动会报：找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain， 因为3.5.5解压缩之后，zookeepr文件夹里面这个jar包没了(网友都有这问题，好像是解压缩之类的问题)，此教程故由3.5.5...
Zookeeper 3.5.7（铲屎官）学习教程
菜鸟玩Java
02-21 2756
目录一、Zookeeper介绍二、Zookeeper的选举机制1.服务器启动初始化2.非第一次启动三、脚本案例1.启动脚本2.客户端命令操作四、动态监听服务器上下线1.具体实现五、Zookeeper分布式锁1.实现Zookeeper分布式锁2.Curator实现分布式锁2.1官网解释：2.2原生API缺点：2.3curator实现案例六、算法基础1.拜占庭将军问题2.Paxos算法3.ZAB协议3.1ZAB介绍4.CAP理论七、详细流程1.Zookeeper服务端初始化流程2.Zookeeper选举流程 一
zookeeper中的QuorumPeerMain解析
chenlibao0823的博客
11-04 1万+
[root@e-root-4 ~]# jps 10139 Jps 31212 QuorumPeerMain QuorumPeerMain是zookeeper集群的启动类，用来加载配置启动QuorumPeer线程的。Quorum是定额的意思，Peer是对等的意思。Quorum表示zookeeper启动后，服务数量就确定了。zookeeper是基于paxos算法实现的，paxos是一个唯一的分布式集...
HADOOP内容总结（Apache Hadoop）。
weixin_45027256的博客
07-29 758
Hadoop是一个由Apache基金会开发的分布式系统架构，主要解决海量数据的存储和海量数据的计算问题。Hadoop1.xMapReduce计算+资源调度MapReduce计算Yarn资源调度HDFS数据存储HDFS数据存储Common辅助工具Common辅助工具Hadoop Dsitributed File System，简称HDFS，是一个分布式文件系统。主要包含三个节点，分别为NameNode、DataNode和Secondary NameNode。
大数据技术之高频面试题
热门推荐
XIAOMO__的博客
11-12 1万+
第一章 项目涉及技术 1.1Linux&Shell 1.1.1 Linux常用高级命令 序号 命令 命令解释 1 top 查看内存 2 df -h 查看磁盘存储情况 3 iotop 查看磁盘IO读写(yum install iotop安装） .
Zookeeper(六)服务器
weixin_30414245的博客
04-28 94
Zookeeper(六)服务器 zkServer.cmd中声明 首先启动QuorumPeerMain set ZOOMAIN=org.apache.zookeeper.server.quorum.QuorumPeerMain 服务器启动 预启动--QuorumPeerMain 解析配置文件zoo.cfg：配置运行时的基本参数tickTime、dataDir、clien...
zookeeper-3.7.0源码环境搭建
tian31233的专栏
02-22 2732
参考：https://www.jianshu.com/p/6c0e17f71736 1、去GitHub下载源码 我下载的是目前最新源码 3.7.0 看之前的版本都需要用ant编译，这个没有build.xml 应该不 ps:也下载过之前的版本进行ant编译结果失败了就放弃了 2、导入进行maven编译 遇见错误和添加配置文件详见参考连接 运行期间遇见错误：Caused...
Zookeeper3.7源码剖析（Session 启动流程 Leader选举 集群数据同步 ）
m0_46690280的博客
04-18 520
Zookeeper3.7源码剖析Zookeeper3.7源码剖析1 Session源码分析1.1 服务端Session属性分析1.2 Session创建 Zookeeper3.7源码剖析 1 Session源码分析 客户端创建 Socket 连接后，会尝试连接，如果连接成功成功会调用到 primeConnection 法用来发送 ConnectRequest 连接请求，这里便是设置 session 会话 ，关于客户端创建会话我们就不在这里做讲解了，我们直接讲解服务端 Session 会话处理流程。 1.1
Zookeeper 3.5.7学习记录(一)——集群的坑
Wangyu的博客
07-26 2131
zookeeper学习记录(一)
windows环境下安装zookeeper3.5.7
weixin_38727482的博客
03-04 1721
1.下载地址： http://zookeeper.apache.org/ 注意：选择带bin的压缩文件，不带bin的是源码 安装不会成功 2.解压缩文件 3.再conf文件夹下复制zoo_sample.cfg文件然后重命名为zoo.cfg文件 4.在安装目录下新建data和log文件夹 5.打开zoo.cfg 修改数据目录 6.打开bin文件夹 找到zkServer.cmd打开 出现安装成功 ...
大数据技术之Zookeeper实战
weixin_43520450的博客
04-20 586
一、分布式安装部署 1、集群规划 在bigdata111、bigdata112和bigdata113三个节点上部署Zookeeper。 2、解压安装 （1）解压zookeeper安装包到/opt/module/目录下 [itstar@bigdata111 software]$ tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/ （2）在/opt/m...
面试中的线程题
yingzi的技术博客
05-18 1198
工作机制：初始化一个计数器，此计数器的值表示需要等待的事件数量。示例：在两个工作线程结束后再调用主线程工作机制：允许一组线程相互等待到达一个共同屏障点示例：当四个线程都达到屏障后，打印一句话，然后每个线程继续执行它们的任务上述完成了两线程交叉打印"A"、“B”，具体说明下模版中是两线程交叉打印 A、B，只需要做简单替换就能实现三线程交叉打印 A、B、C新增线程 C 如下比如要求打印到两线程交叉打印到 10state 控制线程进行轮次，此时可以换为 while 条件，用来控制跳出循环。
Java 09Stream流与File类
最新发布
asom12的博客
05-20 771
startWith(“张”)
【Redis实战】秒杀优惠券优化（Lua脚本，阻塞队列，异步进程）
MonKingWD的博客
05-19 1005
static {
Selenium-Java版（css表达式）
2403_85375987的博客
05-18 1008
文章讲解了Selenium的CSS表达式，如：根据tag名选择元素，根据id、class以及其他属性选择元素，选择子元素和后代元素，按次序选择子节点，选择兄弟节点。
Dubbo+ZookeeperRPC分布式集群服务端源码解析
资源摘要信息:"【Dubbo+Zookeeper的RPC分布式集群服务系统】服务端.zip" 在这个资源包中，包含了一整套基于Dubbo和Zookeeper的RPC分布式集群服务系统的Java源码。Dubbo是阿里巴巴开源的高性能、轻量级的Java RPC...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值