本文深入探讨Kafka的架构，特别是Partition存储结构和分配原理。重点在于Rebalance过程，分析了Kafka如何在消费者之间公平地分配Partition，包括Range和RoundRobin两种策略。同时，文章介绍了协调者（Coordinator）的角色及其在Kafka 0.9版本中去除对Zookeeper依赖的重要性。
目录
kafka hello world
kafka 安装 & 常用API kafka安装 & Kafka java api 0.10.1.1
一. kafka 架构：
Partition存储结构
ACK前需要保证有多少个备份
和大部分分布式系统一样，Kafka处理失败需要明确定义一个Broker是否“活着”。对于Kafka而言，Kafka存活包含两个条件，一是它必须维护与ZooKeeper的session（这个通过ZooKeeper的Heartbeat机制来实现）。二是Follower必须能够及时将Leader的消息复制过来，不能“落后太多”。
二 kafka partition 分配原理探究
kafka的官方文档提供了这样一段描述
In fact, the only metadata retained on a per-consumer basis is the offset or position of that consumer in the log. This offset is controlled by the consumer: normally a consumer will advance its off
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
