kafka消费者分区分配策略

本文介绍了Kafka中三种分区分配策略:Range范围分配策略,保证分区的均衡分配;RoundRobin轮询策略,按字典序轮询分配分区;以及Stricky粘性分配策略,兼顾轮询和稳定性。配置不同的partition.assignment.strategy可以实现不同策略。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1.Range范围分配策略
Range范围分配策略是kafka默认的分配策略,它可以确保每个消费者消费的分区数量是均衡的。
注意:Rangle范围分配策略是针对每个topic的。

配置消费者的partition.assignment.strategy为org.apache.kafka.clients.consumer.RangeAssignor
算法公式:
n=分区数量/消费者数量
m=分区数量%消费者数量
前m个消费者消费n+1,剩余消费者消费n个

分区数量=m(n+1)+ (消费者数量-m)*n= m + n.消费者数量
m=分区数量-n.消费者数量 则为分区数量%消费者数量的值
n=分区数量/消费者数量-m/消费者数量(此部分小于1,取整时舍弃)
得到
n = 分区数量/消费者数量
m = 分区数量%消费者数量

2.RoundRobin轮询策略
RoundRobinAssignor轮询策略是将消费组内所有的消费者以及消费者所订阅的所有topic的partition按照字典序排序(topic和分区的hashcode进行排序),然后通过轮询方式逐个将分区以此分配给每个消费者。

配置消费者的partition.assignment.strategy为org.apache.kafka.clients.consumer.RoundRobinAssignor

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

科学的N次方

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值