RocketMQ--（三）消息重试

最新推荐文章于 2024-04-15 17:43:57 发布
转载 最新推荐文章于 2024-04-15 17:43:57 发布 · 553 阅读 · 0
文章标签：

#RocketMQ

本文介绍RocketMQ消息系统的消费者与生产者工作原理，包括消息发送与接收流程、消息重试机制及消息分发策略。还讨论了不同消费模式的特点，如广播模式与集群模式的区别，并对比了同步双写与异步复制的不同。

1.

一定要先启动Consumer端，在启动Producer端，如果消息拉取失败的话将会个1s.2s.5s.重新拉取，直到获取成功为止，

 

工作中如果长时间拉取失败的处理办法，当重试达到规定 的次数后，记录日志操纵数据库

 

 

小记：只要Consumer没有返回

return ConsumeConcurrentlyStatus.RECONSUME_LATER;

或
return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;

rocketmq就认为没有到达消费端节点

 

 

2. 有两个Consumer端订阅的是同一个Queen和tab，现在直发送一条数据，消息被Consumer1收到了，但是没有做返回处理或者是Consumer1节点宕机了，那么MQ会重试这个消息给Consumer2

 

3.有一个Producer发送了10条数据，现在MQ为双Master模式，在管控台可以看到BrokerA收到了6条，BrokerB收到了4条。现在我关闭BrokerA节点，启动一个Consumer节点，那么之后得到4条数据，在开启BrokerA节点后收到BrokerA节点上的6条数据

关闭broker命令： sh mqshutdown broker

小记：Consumer消费的方式

    

 

　　广播：每个Consumer都收到一份消息

　　          比如Producer发送了10条数据，那么每一个Consumer都收到10条消息

       集群：每个Consumer均分收到消息

 

 

小记：同步双写和异步复制的概念

同步双写：有一主一从两个节点，Producer发送数据的时候必须主从节点都写入后返回生效

异步复制：有一主一从两个节点，Producer发送数据的时候只要从节点写入后返回生效

异步复制效率高于同步双写，消息原子性低于同步双写

 

 

 

刷盘方式：是以上截图中，commitlog 和 consumberqueue的关系

RocketMQ(24) -- RocketMQ应用 -- 消息发送重试机制
姜皓的博客
05-08 1479
RocketMQ应用 -- 消息发送重试机制
RocketMq(二)消息重试机制
w_t_y_y的博客
10-09 1924
2、SQL过滤：SQL过滤是一种通过特定表达式对事先埋入到消息中的用户属性进行筛选过滤的方式。通过SQL过滤，可以实现对消息的复杂过滤。一、消息过滤：消息者在进行消息订阅时，除了可以指定要订阅消息的Topic外，还可以对指定Topic中的消息根据指定条件进行过滤，即可以订阅比Topic更加细粒度的消息类型。对于指定Topic消息的过滤有两种过滤方式：Tag过滤与SQL过滤。1、Tag过滤：通过consumer的subscribe()方法指定要订阅消息的Tag。SQL过滤表达式中支持多种常量类型与运算符。
RocketMQ——ack机制保证消费成功
热门推荐
东天里的冬天
06-26 3万+
ACK简介 在实际使用RocketMQ的时候我们并不能保证每次发送的消息都刚好能被消费者一次性正常消费成功，可能会存在需要多次消费才能成功或者一直消费失败的情况，那作为发送者该做如何处理呢？ RocketMQ提供了ack机制，以保证消息能够被正常消费。发送者为了保证消息肯定消费成功，只有使用方明确表示消费成功，RocketMQ才会认为消息消费成功。中途断电，抛出异常等都不会认为成功——即都会重...
RocketMQ消息重试机制
长江七号的博客
04-15 3670
还有另外一种方式，继承RocketMQListener类，增加注解RocketMQMessageListener，通过设置消息的参数来监听消息，maxReconsumeTimes默认为16次，可以通过设置，修改重试的次数。如果严格按照上述重试时间间隔计算，某条消息在一直消费失败的前提下，将会在接下来的 4 小时 46 分钟之内进行 16 次重试，超过这个时间范围消息将不再重试投递。，若达到最大重试次数后消息还没有成功被消费，则消息将被投递至。，即消费失败后，失败消息不再重试，继续消费新的消息。
RocketMQ消息重试
程序员劝退师的博客
01-18 1738
顺序消息的重试 对于顺序消息，当消费者消费消息失败后，消息队列 RocketMQ 会自动不断进行消息重试（每次间隔时间为 1 秒），这时，应用会出现消息消费被阻塞的情况。因此，在使用顺序消息时，务必保证应用能够及时监控并处理消费失败的情况，避免阻塞现象的发生。 无序消息的重试 对于无序消息（普通、定时、延时、事务消息），当消费者消费消息失败时，您可以通过设置返回状态达到消息重试的结果。 无序消息的重试只针对集群消费方式生效；广播方式不提供失败重试特性，即消费失败后，失败消息不再重试，继续消费新的消息。 重试
rocketmq-all-5.1.4-bin-release.zip
10-21
8. **消息重试与死信队列**：RocketMQ有内置的重试机制，当消费者处理消息失败时，消息会被自动重试。若多次尝试后仍无法处理，消息会被放入死信队列，避免消息丢失。 9. **监控与管理**：RocketMQ提供Web Console...
rocketmq-all-5.1.0-bin-release.zip
02-21
最后，RocketMQ还具备消息过滤和消息重试等功能。通过设置过滤规则，消费者可以只消费满足条件的消息，减少无效处理；消息重试机制则为了解决消息处理失败的情况，系统会自动重试，直到消息被成功消费或达到最大重试...
rocketmq-all-5.1.3-bin-release.zip
07-04
6. 容错机制：如基于主从复制的HA方案，以及基于时间窗口的重试策略，确保消息正确投递。 在"rocketmq-all-5.1.3-bin-release"这个目录下，通常会包含以下组件和文件： 1. `bin`目录：存放可执行脚本，如启动、...
rocketmq-dashboard.zip
12-10
8. **消息重试与死信队列**：RocketMQ有内置的重试机制，对于消费失败的消息会自动重试，多次尝试后仍无法成功则放入死信队列，避免无限循环。 RocketMQ Dashboard 提供的功能包括： 1. **实时监控**：展示RocketMQ...
rocketmq-console-ng-1.0.0.zip
03-27
可以进行消息重试、手动调阅等操作。 5. **运营分析**：提供消息的延迟分析、消费不均衡分析等功能，帮助优化系统的消息处理性能。 6. **报警设置**：设置自定义的报警规则，当系统出现异常时，如消息堆积过多、...
RocketMQ重试机制及消息幂代码实例解析
08-25
主要介绍了RocketMQ重试机制及消息幂代码实例解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
RocketMQ 消息重试机制
这个需求，做不了
09-25 3452
RocketMQ 消息重试分为发送重试（生产者）和消费重试（消费者）
RocketMQ的消息重试机制
xajh_czbk的博客
02-06 165
无
RocketMQ（十四）RocketMQ消息重试机制
weixiaohuai的博客
04-29 1万+
目录 一、概述 二、生产端的消息重试 三、消费端的消息重试 四、消息重试次数 五、消息重试配置 六、消息重试原理 一、概述 由于网络抖动、服务宕机等一些不确定的因素，RocketMQ在发送消息的时候很有可能出现消息发送或者消费失败的问题。 Consumer消费消息失败通常可以认为有以下几种情况： 由于消息本身的原因，例如反序列化失败，消息数据本身无法处理（例如话费充值，当前消息的手机号被注销，无法充值）等。这种错误通常需要跳过这条消息，再消费其它消息，而这条失败的消息即使立刻重试消费，9
你不知道的RocketMQ 消息重试机制
Apple_Boy的博客
02-14 1万+
文章目录一、Producer端重试二、 Consumer端重试1、Exception2、Timeout其他理解死信的业务处理方式 消息重试分为两种：Producer发送消息的重试 和 Consumer消息消费的重试。 一、Producer端重试 Producer端重试是指: Producer往MQ上发消息没有发送成功，比如网络原因导致生产者发送消息到MQ失败。 部分源码解析： /** ...
rocketmq - 9 消息重试，消息幂等去重，消息模式
liang
08-28 6648
Rocketmq提供了消息重试机制，这是一些其他消息队列没有的功能。我们可以依靠这个优秀的机制，而不用在开发中增加更多的业务代码去实现 消息重试 Consumer 消费消息失败后，要提供一种重试机制，令消息再消费一次。Consumer 消费消息失败通常可以认为有以下几种情冴 由于消息本身的原因，例如反序列化失败，消息数据本身无法处理（例如话费充值，当前消息的手机号被注销，无法充值）等。 ...
RocketMQ篇二（消息重试、死信队列、死信消息、消息幂等、延迟消息、顺序消息、消息过滤、回溯消费、事务消息）
xingze的博客
07-17 7831
1. 消息重试 1.1 如何让消息进行重试 1.2 重试消息如何处理 2. 死信队列、死信消息 3. 消息去重/消息幂等（防止消息重复消费） 4. 定时消息（延迟消息） 5. 顺序消息 6. 消息过滤 7. 回溯消费 8. 事务消息
rocketmq-client-nodejs
最新发布
08-19
在Node.js中使用RocketMQ客户端库，通常推荐使用社区或官方提供的适配器。虽然RocketMQ的原生客户端是基于Java的，但可以通过一些Node.js的绑定库来实现Node.js应用与RocketMQ的交互。以下是关于Node.js中使用RocketMQ客户端库的一些关键信息和使用指南： ### 安装与依赖 首先，需要确保Node.js环境已经正确配置。RocketMQ的Node.js客户端库通常依赖于本地库（如C/C++编写的库），因此在安装过程中可能需要编译这些依赖。常见的安装方式是通过`npm`包管理器进行安装。例如，可以使用`rocketmq-client-node`等第三方库[^1]。 ```bash npm install rocketmq-client-node ``` ### 初始化生产者与消费者 初始化生产者时，需要指定Name Server地址和生产者组名。生产者用于发送消息到RocketMQ Broker。 ```javascript const { Producer } = require('rocketmq-client-node'); const producer = new Producer({ namesrvAddr: '127.0.0.1:9876', groupName: 'test-group' }); await producer.start(); ``` 对于消费者，同样需要指定Name Server地址和消费者组名，并且需要订阅特定的主题（Topic）以及可选的标签（Tag）。 ```javascript const { PushConsumer } = require('rocketmq-client-node'); const consumer = new PushConsumer({ namesrvAddr: '127.0.0.1:9876', groupName: 'test-group' }); await consumer.subscribe('test-topic', '*'); await consumer.registerMessageListener(async (msg) => { console.log(`Received message: ${msg.body.toString()}`); return Promise.resolve(); }); await consumer.start(); ``` ### 发送与接收消息 发送消息时，可以构造一个`Message`对象，指定主题、标签和消息体，然后调用生产者的`send`方法。 ```javascript const { Message } = require('rocketmq-client-node'); const msg = new Message('test-topic', 'TagA', Buffer.from('Hello RocketMQ')); await producer.send(msg); ``` 消费者通过注册的消息监听器来处理接收到的消息。监听器函数接收消息对象，并返回一个Promise以指示消息处理完成。 ### 配置与优化 RocketMQ的Node.js客户端提供了多种配置选项，包括但不限于重试机制、线程数、超时设置等。合理配置这些参数可以提高系统的稳定性和性能。 ### 错误处理与日志 在使用RocketMQ客户端的过程中，需要注意错误处理和日志记录。客户端库通常会提供日志输出功能，帮助开发者追踪问题。同时，对于可能出现的异常情况，如网络中断、消息发送失败等，应有相应的处理机制。 ### 总结 通过上述步骤，可以在Node.js项目中集成RocketMQ客户端库，实现高效的消息传递。需要注意的是，具体的API和配置可能会随着库版本的不同而有所变化，因此建议查阅最新的文档获取最准确的信息。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值