消息队列如何保证消息不丢失

检测消息丢失

1. 布式链路追踪系统
   如果是 IT 基础设施比较完善的公司，一般都有分布式链路追踪系统，使用类似的追踪系统可以很方便地追踪每一条消息。
2. 利用消息队列的有序性来验证
   Producer端,我们给每个发出的消息附加一个连续递增的序号,然后在Consumer端来检查这个序号的连续性,连续则没有丢失,不连续则丢失,还能知道丢的是哪条消息。

大多数消息队列的客户端都支持拦截器机制,你可以利用这个拦截器机制,在 Producer发送消息之前的拦截器中将序号注入到消息中,在Consumer收到消息的拦截器中检测序号的连续性,这样实现的好处是消息检测的代码不会侵入到你的业务代码中,待你的系统稳定后,也方便将这部分检测的逻辑关闭或者删除。

也能使用分布式链路追踪系统追踪。

确保消息的稳定传递

• 在生产阶段,你需要捕获消息发送的错误,并重发消息。
• 在存储阶段,你可以通过配置刷盘和复制相关的参数,让消息写入到多个副本的磁盘上,来确保消息不会因为某个Broker宕机或者磁盘损坏而丢失。
• 在消费阶段,你需要在处理完全部消费业务逻辑之后,再发送消费确认。