分布式应用协调服务ZooKeeper

1.ZooKeeper简介

• Zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目
• Zookeeper=文件系统+通知机制
  • Zookeeper从设计模式上来看是一个基于观察者模式设计的分布式服务管理框架，它负责存储和管理大家都关心的数据，然后接受观察者的注册
  • 一旦数据的状态发生变化，Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应，从而实现集群中类似Master/Slave管理模式

2.ZooKeeper数据结构

• znode
  • ZooKeeper数据模型的结构与Linux文件系统很像，整体上可以看作是一棵树，树的每个节点称做一个znode。每一个znode默认能够存储1MB的数据，每个znode都可以通过其路径唯一标识
• 节点类型
  • PERSISTENT：持久化节点，默认类型
  • PERSISTENT_SEQUENTIAL：持久化顺序编号节点
  • EPHEMERAL：临时节点
  • EPHEMERAL_SEQUENTIAL：临时顺序编号节点

3. ZooKeeper客户端命令

常用客户端命令列表

命令基本语法	命令功能描述
help	显示所有操作命令
ls path	使用ls命令查看当前znode中所包含的内容
ls2	查看当前节点数据并能看到更新次数等数据
create	创建节点，默认是持久化节点create -s：创建带序列的节点create -e：创建临时节点
get path	获取节点的值
set	设置节点的具体值
stat	查看节点状态
delete	删除节点
rmr	递归删除节点

4. ZooKeeper角色

• Leader（领导者）
  • 负责进行投票的发起和决议，更新系统状态
• Follower（跟随者）
  • 用于接收客户端请求并向客户端返回结果，在选主过程中参与投票
• Observer（观察者）
  • 可以接收客户端连接，将写请求转发给Leader节点。但Observer不参加投票过程，只同步
• Leader状态。Observer的目的是为了扩展系统，提高读取速度。

5. ZooKeeper选举机制

• 半数机制
  • 集群中半数以上机器存活，集群可用
  • ZooKeeper工作时，有一个节点为Leader，其他为Follower，Leader是通过内部选举机制临时产生的
  • Leader选举是保证分布式数据一致性的关键所在
• leader选举触发时机
  • 服务器初始化启动
  • 服务器运行期间无法和Leader保持连接

6. Hadoop高可用集群搭建

https://blog.youkuaiyun.com/zmzdmx/article/details/108473706