mq如何通过异步命令组件做到顺序消费

最新推荐文章于 2024-12-26 15:45:00 发布
最新推荐文章于 2024-12-26 15:45:00 发布
阅读量576 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： rabbitmq java mq 消息 文章标签： mq java rabbitmq
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wwdwjm/article/details/99602074
本文探讨了如何在mq环境下，通过异步命令组件确保订单创建和订单修改的消息顺序消费。当订单修改消息可能先于订单创建消息到达时，系统将保存订单创建消息到表中并等待其业务完成，再执行订单修改的业务，从而保证业务顺序。具体实现参考GitHub项目链接。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

场景

当有一个业务需要监听订单创建和订单修改的消息 正常消费顺序肯定是需要先消费订单创建的消息 再消费订单修改的消息 不过也可能因为网络和mq投递速度的关系 导致订单修改的消息先发送到消费方 这就导致顺序乱了

在这里插入图片描述

异步命令组件如何做到顺序消费

https://github.com/bojiw/asyncmd
image

  • 收到订单创建的消息
  • 把消息内容放到异步命令对象中先保存到表中 然后返回给mq已经成功处理消息
  • 然后组件会执行对应的异步命令执行器 可以把具体的业务写入到这个执行器中

上面的是正常使用 而要做到顺序消费 再异步命令对象中有关联业务id(rely_biz_id)字段

  • 收到订单修改的消息
  • 把消息内容放到异步命令对象中并且设置rely_biz_id为订单创建消息的业务id
  • 保存到表中
  • 执行的时候组件会先通过rely_biz_id查询是否有订单创建的消息已经成功消费并且也已经处理了对应的业务
  • 如果订单创建的对应业务没有处理 则不执行
  • 等订单创建的对应业务处理成功 则会执行订单修改的异步命令执行器处理业务
    image
    具体代码案例
    https://github.com/bojiw/asyn-springboot-demo
    OrderCreateListener和OrderModifyListener实现mq的顺序消费 保证同一笔订单肯定先处理订单创建消息 再处理订单修改消息
最低0.47元/天 解锁文章

200万优质内容无限畅学
MQ - 27 基础功能：顺序消息和幂等的设计
小工匠
09-23 9902
在消息队列中，消息是否能有序是一个常常被问到的问题。因为在我们的业务中，比如在有序事件处理、数据实时增量同步等情况下，就需要消息队列支持顺序消息的机制。接下来我们就来看看消息队列中顺序消息的定义和实现。在消息队列中，消息的顺序性一般指的是时间的顺序性，排序的依据就是时间的先后。从功能来看，即生产端发送出来的消息的顺序和消费端接收到消息的顺序是一样的。牢记这个定义，对于我们后面理解顺序消息的实现很重要接下来我们来看看幂等的定义和实现机制，先来看看什么是幂等。
深入理解消息队列中的消息消费顺序及实现方式
最新发布
恩爸编程
01-12 2461
消息队列里的消息，本质上是一个个待处理的数据单元。消息消费顺序指的是消费者从队列中获取消息并处理时，消息之间的先后次序关系。全局顺序：整个消息队列系统中，所有消息都严格按照发送的先后顺序被消费。例如，在一个电商系统里，用户下单、支付、发货这一系列操作对应的消息，必须全局有序，否则就可能出现先发货后支付这类违背业务逻辑的情况。分区顺序：当消息队列采用分区机制来提升吞吐量时，在同一个分区内的消息要保持顺序。
java实现接收MQ消息后加入内存队列进行消费
weixin_42962634的博客
12-22 1255
java实现接收MQ消息后加入内存队列进行消费 根据appSampleId进行区分，相同id的采用同一个线程去处理。 ConcurrentHashMap、newFixedThreadPool都是线程安全的 最多采用10个线程进行消费。 package cn.com.genecast.modules.biobank.controller; import java.util.ArrayList; import java.util.List; import java.util.Map; import java
关于MQ的几件小事（五）如何保证消息按顺序执行
weixin_33898876的博客
05-22 704
1.为什么要保证顺序 消息队列中的若干消息如果是对同一个数据进行操作，这些操作具有前后的关系，必须要按前后的顺序执行，否则就会造成数据异常。举例： 比如通过mysql binlog进行两个数据库的数据同步，由于对数据库的数据操作是具有顺序性的，如果操作顺序搞反，就会造成不可估量的错误。比如数据库对一条数据依次进行了 插入->更新->删除操作，这个顺序必须是这样，如果在同步过程中，消息的...
MQ如何保证消息的有序消费？
xy779323365的博客
06-27 5214
谈起这个问题，相信大家并不陌生，不管是在各种面试提问中，还是在真实业务场景中，都很常见了，保证消息消费的有序性还是很有意义的。
RoctetMQ 如何保证顺序消费
qq_40230026的博客
02-10 2242
文章目录1：背景2：发送端3：消费端 1：背景 在一些特殊的场景下，需要保证消息的顺序性，rocketMQ 提供了确实有效的解决方法。需要发送端和消费端同时保证才行。 总结下来，需要满足下面几个条件： 1：同一个Topic 2：同一个Queue 3：发消息的时候用同一个线程发送消息 3：消费消息的时候用同一个线程消费一个 Queue 里面的消息，或者用提供的消息选择器 MessageListenerOrderly 2：发送端 示例代码： /** * 发送顺序消息 */ p
RabbitMQ如何保证顺序消费
热门推荐
一江溪水
10-30 1万+
为什么要顺序消费 保证消息的顺序消费是生产业务场景下经常面临的挑战，例如电商的下单逻辑，在用户下单之后，会发送创建订单和扣减库存的消息，我们需要保证扣减库存在创建订单之后执行。 处理业务逻辑后，向MQ发送一条消息，再由消费者从 MQ 中获取 消息落盘到MySQL 中。 在这个过程中，可能会有增删改的操作，比如执行顺序是增加、修改、删除。 消费者可能换了顺序给执行成删除、修改、增加，所以我们要保证消息的顺序消费 为什么会不按顺序消费 对于 RabbitMQ 来说，导致上面顺序错乱的原因通常是消费者是集群部
理解MQ：异步、解耦与高可用策略
消息队列MQ是现代软件架构中不可或缺的组件，它的主要作用在于提高系统的异步处理能力、解耦各个组件、增强系统的容错性和可扩展性。在各种场景中，MQ都能发挥关键作用： 1. 异步通信：MQ允许发送方将消息放入队列...
[重要]基于Websphere MQ持久化消息实现异步转同步—方案一
08-14
在分布式系统中，异步处理和消息队列（Message Queuing，MQ）是提高系统可扩展性和解耦组件的重要手段。Websphere MQ是IBM提供的一款强大、可靠的消息中间件，它支持多种操作系统和编程语言，能够帮助开发者实现应用...
RockerMQ 的异步消费
gaohechao的博客
03-06 1792
项目终于开发完了，明天就开始联调了，总结下rocketma的使用场景和使用方法。 业务正常流程是这样的：用户下单 - 扣减库存 - 生成待支付订单 - 调用支付网关 - 支付成功后回调 - 修改订单数据 - 调发码平台购票，流程走完。 mq这里要做的是在生成待支付订单后将消息延迟10分钟放到mq，然后做一个异步监听，将监听到的数据去库里面查一遍有没有支付完成，如果没有支付完成就将订单取消，增加库存。 这么做的目的是防止有很多待支付的订单占用库存数量。 ...
RocketMQ结合实际场景顺序消费，它是如何保证顺序消费的？
weixin_74412978的博客
12-26 1100
为了保证消息的顺序性，我们必须保证同一个消息队列在同一时刻只能被消费者组内一个消费者消费，从负载均衡方面，向Broker发起锁定该消息队列的请求，上锁成功则新建一个拉取任务PullRequest，从消息消费方面，批量拉取消息成功后，进行提交消费请求，消息提交到内部的线程池，为了保证消息的顺序性，我们必须为消费队列上锁，来保证同一时刻消费队列只会被线程池中的一个线程消费。
Kafka、RocketMQ、RabbitMQ如何保证消息的顺序消费？
学亮编程手记
05-28 1870
全局有序是一个topic下的所有消息都要保证顺序，如果要保证消息全局顺序消费，可以将该主题的队列数设置为1，牺牲高可用性。局部有序是指保证同一个消息队列上的消息顺序消费。RabbitMQ没有属性设置消息的顺序性，所以在没有前提的情况下说 RabbitMQ消息的消费具有顺序性是错误的。二、生产者在发送消息的时候指定要发送到哪个 Partition，这样同一个 Partition 的数据会被同一个消费者消费，从而保证了消息的消费顺序。一、局部顺序消息消费，也就是保证同一个消息队列上的消息顺序消费；
如何保证RabbitMQ消息顺序消费
NoviceZ的博客
03-06 6473
所谓顺序消费，即保证消息的发送顺序要与消息的消费顺序保持一致。
rabbitmq如何保证消息顺序消费
wyh2943455568的博客
08-26 3437
可以看到消费者的执行顺序是不一定的，有时TripleQueueOneListener限制性，有时TripleQueueTwoListener限制性，这就是为什么要限制同一个用户的一组操作要发送给同一个队列的原因，因为在一个队列里就能保证消息的先进先出；但是在分布式系统中我们一般会对消费者设置集群部署，就是一个队列会有多个消费者实例，那我们如何保证一组信息只会有一个消费者处理呢？rabbitmq的队列是先进先出的原则，所以只要是发送给同一个队列的消息，都能保证消费时顺序一致；这时候就要用到我们的。
既保证异步消费 ，又保证顺序消费的mq消费方案
Java菜鸟的费曼学习法实践地
05-24 461
从MQ的角度保证顺序,需要保证 生产者-消息队列-消费者 都是一对一的关系; 从业务的角度保证顺序,需要在生产消息时指定消息的顺序,消费者再根据消息的顺序,按序消费
RocketMQ快速入门：如何保证消息顺序消费，附带源码分析（八）
55555的博客
06-20 5026
顺序消息在金融、电商等场景中被广泛应用，只要业务需求对流程顺序性有严格要求，就有顺序消息的应用之地。因此理解顺序消息的原理和实现路径，是我们学习rocketmq的必经之路。
RocketMQ如何保证消息顺序消费？又为何不解决消息重复消费问题？
July的博客
11-22 5855
消息的顺序消费对于业务系统来说非常重要，一笔订单产生了3条消息，分别是订单创建、订单付款、订单完成。消费时，必须按照顺序消费才有意义，与此同时多笔订单之间又是可以并行消费的。 如何保证消息顺序消费？ 接下来我们通过订单的例子来展示RocketMQ如何保证消息顺序消费的： 我们最容易想到的应该是如图这样，必须M1先消费后通知S2，M2才能够被消费 问题是：M1、M2分别发送到S1、S2，这样就无法保证M1先到达MQ集群，也不能保证M1先被消费 如果把多个需要顺序消费的消息都发送到同一个MQ Server.
【RocketMQ顺序消费原理】
weixin_44541808的博客
11-30 676
1 、 一个Topic下的消息会被保存在多个Queue中, 多个Queue是分片保存的关系(类似于es或者mysql的横向分表), 所以全局是无法保证消息的顺序性的, 但是 单个Queue中的消息是有序的。，这样保证了只有当前线程可以进行消息处理，不会重复消费，同时也可以防止Rebalance线程把当前处理的MessageQueue移除掉。这样Broker就会把消息固定的发送给一个消费者, 实现原理其实就是通过加锁。，确保同一时间，一个队列只有一个线程处理消息。消费者消费消息时，会。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值