细读经典第一期——从Paxos到Zookeeper 分布式一致性原理与实践(5)

本文详细介绍了Zookeeper中的服务器角色,包括Leader、Follower和Observer的工作原理。Leader负责处理请求顺序,调度集群,使用责任链模式进行处理;Follower接收非事务请求,转发事务请求给Leader,并参与投票;Observer不处理事务请求,提升集群非事务处理能力。请求处理链涉及多个Processor,确保了Zookeeper的高效和一致性。

漫长的第七章还没结束,其实ZK本身在使用层面上来讲是相对而言比较容易的,因为本身他就是一个开源版的Chubby,但其实内部结构还是比较复杂的。

7.7服务器角色介绍(重点)

7.7.1 Leader

主要工作:

保持proposal处理请求的顺序性,作为ZK集群的调度者

一提到请求处理顺序,第一反应就是责任链模式,对ZK Leader而言,其请求链: 

责任链模式

PreRequestProcessor:识别请求是否事务请求,如果是,则创建请求头、事务体,会话检查,ACL检查等

ProposalRequestProcessor:识别请求是否事务请求,如果是,则根据请求创建proposal,并发送给Follower进行事务投票,并将请求转给CommitProcesser处理,同时转给SynRequestProcessor进行日志记录。

SynRequestProcessor:用来记录ZK的事务请求并持久化到日志文件,也会触发ZK进行数据快照  

AckRequestProcessor:在日志记录完成后通知投票收集器已经完成了对Proposal的事务日志记录

CommitRequestProcessor:非事务请求直接转发下一级,事务请求会等待集群对proposal进行投票直到proposal可被提交,用于控制事务提交的

ToBeCommitedProcessor:leader的内部类,维护了一个ConcurrentLinkedQueue类型的toBeApplied先进先出队列用来存储被CommitProcessor处理过的可以被提交的Proposal

FinalRequestProcessor:创建客户端响应,存储事务到内存数据库中

整个集群在实时通信时,Leader会为每一个Follower或Observer保存一份连接实体在LearnerHandler中,Leader持有一个HashSet<LearnerHandler>类型的引用,同时包含了一些列通信Sokect通信的方法

7.7.2 Follower 

处理客户端非事务请求,转发事务请求给Leader

参与事务请求Proposal投票,参与Leader选举

对于Follower而言,其处理链:

与Leader不同的Processor有:

FollowerRequstProcessor:判断是否为事务请求,如果不是,则转发下一级,如果是,则转发给Leader进行事务请求处理

当收到Leader发送的事务消息时,会进入SendAckRequestProcessor处理流程

SendAckRequestProcessor:Leader日志记录完后,做本地调用进入AckRequestProcessor流程,Follower日志记录完后,做远程调用进入SendAckRequestProcessor向Leader发送自身的ACK消息 

7.7.3 Observer

由于Observer不参与投票,故Observer本身就设计成不去处理事务请求。如果收到事务请求,就会将事务请求转发给Leader进行处理,也就是说,Observer主要是用来提升集群非事务处理能力。除此以外,Observer和Follower并无其余差别

7.8 请求处理(重点)

7.9 数据与存储

8 集群运维

着重说一下扩缩容,命令有手就行,自己敲敲完事,直接复制一篇,可能我自己做也就这样

理解Zookeeper(九):Zookeeper扩容和缩容 - 昀溪 - 博客园

AI 代码审查Review工具 是一个旨在自动化代码审查流程的工具。它通过集成版本控制系统(如 GitHub 和 GitLab)的 Webhook,利用大型语言模型(LLM)对代码变更进行分析,并将审查意见反馈到相应的 Pull Request 或 Merge Request 中。此外,它还支持将审查结果通知到企业微信等通讯工具。 一个基于 LLM 的自动化代码审查助手。通过 GitHub/GitLab Webhook 监听 PR/MR 变更,调用 AI 分析代码,并将审查意见自动评论到 PR/MR,同时支持多种通知渠道。 主要功能 多平台支持: 集成 GitHub 和 GitLab Webhook,监听 Pull Request / Merge Request 事件。 智能审查模式: 详细审查 (/github_webhook, /gitlab_webhook): AI 对每个变更文件进行分析,旨在找出具体问题。审查意见会以结构化的形式(例如,定位到特定代码行、问题分类、严重程度、分析和建议)逐条评论到 PR/MR。AI 模型会输出 JSON 格式的分析结果,系统再将其转换为多条独立的评论。 通用审查 (/github_webhook_general, /gitlab_webhook_general): AI 对每个变更文件进行整体性分析,并为每个文件生成一个 Markdown 格式的总结性评论。 自动化流程: 自动将 AI 审查意见(详细模式下为多条,通用模式下为每个文件一条)发布到 PR/MR。 在所有文件审查完毕后,自动在 PR/MR 中发布一条总结性评论。 即便 AI 未发现任何值得报告的问题,也会发布相应的友好提示和总结评论。 异步处理审查任务,快速响应 Webhook。 通过 Redis 防止对同一 Commit 的重复审查。 灵活配置: 通过环境变量设置基
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值