RocketMq使用过程中经验总结

探讨RocketMQ中消费组的原理与负载均衡机制,包括生产者与消费者组的匹配原则,同一消费组内消费者订阅的同步性,及不同消费组间的独立消费行为。

1.如果启动生产者或使用者失败,并且错误消息是生产者组或使用者重复?
原因:使用相同的Producer / Consumer组在同一JVM中启动Producer / Consumer的多个实例可能会导致客户端无法启动。
解决方案:确保与一个生产者/消费者组相对应的JVM仅以一个生产者/消费者实例启动。

2.RocketMq同一个消费组group下,每一个consumer都要订阅相同的topic和tag?
消费群体
与前面提到的生产者组相似,角色完全相同的消费者被分组在一起并命名为Consumer Group。
消费者组是一个很棒的概念,通过它,在消息消耗方面实现负载平衡和容错的目标非常容易。
警告:使用者组的使用者实例必须具有完全相同的主题订阅。

话题
主题是生产者传递消息而消费者提取消息的类别。主题与生产者和消费者之间的关系非常松散。
具体来说,一个主题可能有零个,一个或多个向其发送消息的生产者。
相反,生产者可以发送不同主题的消息。
从消费者的角度来看,一个主题可以由零个,一个或多个消费者组订阅。
与此类似,消费者组可以订阅一个或多个主题,只要该组的实例保持其订阅一致即可。

3.同一个消费组内的各个消费者客户端的订阅相互被覆盖

https://blog.youkuaiyun.com/bishe_teacher/article/details/107534077

org.apache.rocketmq.broker.client.ConsumerManager#registerConsumer:这个源码中看出
这步骤是 broker 更新消费者订阅信息的核心方法,如果消费组的消费者信息 ConsumerGroupInfo 为空,
则新建一个,从名字可知道,订阅信息是按照消费组进行存放的,因此在更新订阅信息时,
订阅信息是按照消费组存放的,这步骤就会导致同一个消费组内的各个消费者客户端的订阅信息相互被覆盖。

4.RocketMQ生产者GroupName和消费者GroupName有直接关系吗?
a . 如果生产者指定groupnameA,有两个消费者,且消费的时候用的是groupnameB,但是topic和tag生产者生产的时候一样,这种情况下会怎么样? 答案:消费者会正常负载均衡消费到消息
b . 如果再启动一个消费者groupnameA和生产者组保持一致,那么生产者groupnameA所产生的消息全部能被再次消费一遍

结论:同一个组内,消费过的,返回return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;后,当前组认为这条消息已经被消费过了
另外一个组中,只要topic和tag一致,同样能再次消费一遍所有的消息
综上:所谓的消费成功,是建立在同组中的相对概念。

RocketMQ 是阿里巴巴在2012年开源的分布式消息中间件,目前已经捐赠给 Apache 软件基金会,并于2017年9月25日成为Apache 的顶级项目。作为经历过多次阿里巴巴双十一这种“超级工程”的洗礼并有稳定出色表现的国产中间件,以其高性能、低延时和高可靠等特性近年来已经也被越来越多的国内企业使用。其主要功能有1.灵活可扩展性、2.海量消息堆积能力、3.支持顺序消息、4.多种消息过滤方式、5.支持事务消息、6.回溯消费等常用功能。RocketMQ 核心的四大组件:Name Server、Broker、Producer、Consumer ,每个组件都可以部署成集群进行水平扩展。2、适应人群有一定的Java基础,并且有分布式项目开发经验。3、课程价值可以让初学者对分布式系统解耦有一定认识,并且能够通过快速使用RocketMQ实现分布式服务的异步通信,同时本课程还会通过项目案例实战让学员对RocketMQ的应用场景有所体会,最后再通过源码角度让学员对RocketMQ的原理有所理解,不仅做到“知其然”,亦“知其所以然”。4、课程收获1. 理解消息中间件MQ的优势和应用场景2. 掌握RocketMQ的核心功能,以及各种消息发送案例3. 通过电商项目深刻理解RocketMQ使用项目中的落地应用4. 通过RocketMQ高级功能和源码学习,对RocketMQ的技术细节和原理有更加透彻的理解5、课程亮点l  核心功能n  MQ介绍n  环境准备n  RocketMQ高可用集群搭建n  各种消息发送样例l  综合练习n  项目背景介绍n  功能分析n  项目环境搭建n  下单功能,保证各服务的数据一致性n  确认订单功能,通过消息进行数据分发n  整体联调l  高级功能n  消息的存储和发送n  消息存储结构n  刷盘机制n  消息的同步复制和异步复制n  负载均衡l  源码分析n  路由中心NameServern  消息生产者Producern  消息存储n  消息消费Consumer6、主讲内容章节一:核心功能1.     快速入门a)     MQ介绍b)     作用c)      注意事项d)     各MQ产品比较2.     RocketMQ环境搭建a)     环境准备b)     安装RocketMQc)      启动RocketMQd)     测试RocketMQe)     关闭RocketMQ3.     RocketMQ高可用集群搭建a)     集群各角色介绍b)     集群搭建方式c)      双主双从集群搭建d)     集群监控平台4.     各种消息发送样例a)     同步消息b)     异步消息c)      单向消息d)     顺序消息e)     批量消息f)      过滤消息g)     事务消息章节二:项目实战1.    项目背景介绍(1)    电商高可用MQ实战2.    功能分析(1)    下单功能(2)    支付功能3.    项目环境搭建(1)    SpringBoot(2)    Dubbo(3)    Zookeeper(4)    RocketMQ(5)    Mysql4.下单功能,保证各服务的数据一致性5.确认订单功能,通过消息进行数据分发章节三:高级功能1. 消息的存储和发送2. 消息存储结构3. 刷盘机制(1)    同步刷盘(2)    异步刷盘4. 消息的同步复制和异步复制5. 负载均衡(1)    Producer负载均衡(2)    Consumer负载均衡章节四:源码分析1.     路由中心NameServera)     NameServer架构设计b)     NameServer启动流程c)      NameServer路由注册和故障剔除2.     消息生产者Producera)     生产者启动流程b)     生产者发送消息流程c)      批量发送3.     消息存储a)     消息存储流程b)     存储文件与内存映射c)      存储文件d)     实时更新消息消费队列和存储文件e)     消息队列与索引文件恢复f)      刷盘机制4.     过期文件删除机制a)     消息消费Consumerb)     消费者启动流程c)      消息拉取d)     消息队列负载均衡和重新分布机制e)     消息消费过程f)      定时消息机制g)     顺序消息
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值