高并发之消息队列

消息队列在企业IT系统中扮演重要角色,实现异步解耦、保证最终一致性、广播和流量控制等功能。通过将任务放入消息队列,如Kafka,可以提升系统性能,应对高并发场景,降低系统复杂性,同时支持扩展性和容错性。消息队列的使用场景包括异步处理、解耦组件以及流量削峰等。

消息队列已经逐渐成为企业IT系统内部通信的核心手段。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能,成为异步RPC的主要手段之一。

消息被处理的过程相当于流程A被处理。我们这里以一个实际的模型来讨论下,比如用户下单成功时给用户发短信,如果没有这个消息队列,我们会选择同步调用发短信的接口,

并等待短息发送成功,这时候假设短信接口实现出现问题了,或者短信调用端超时了,又或者短信发送达到上限了,我们是选择重试几次还是放弃,还是选择把这个放到数据库

过一段时间再看看呢,不管怎样,实现都很复杂。

我们可以将发短信这个请求放在消息队列里,消息队列按照一定的顺序挨个处理队列里的消息,当处理到发送短信的任务时,通知短信服务发送消息,如果出现之前出现的问题,那么把这个消息重新放到消息队列中。

 

消息队列的好处:

1.成功完成了一个异步解耦的过程。短信发送时只要保证放到消息队列中就可以了,接着做后面的事情就行。一个事务只关心本质的流程,需要依赖其他事情但是不那么重要的时候,有通知即可,无需等待结果。每个成员不必受其他成员影响,可以更独立自主,只通过一个简单的容器来联系。

对于我们的订单系统,订单最终支付成功之后可能需要给用户发送短信积分什么的,但其实这已经不是我们系统的核心流程了。如果外部系统速度偏慢(比如短信网关速度不好),那么主流程的时间会加长很多,用户肯定不希望点击支付过好几分钟才看到结果。那么我们只需要通知短信系统“我们支付成功了”,不一定非要等待它处理完成。

高并发消息队列中间件是一种用于处理大量并发消息传递的软件系统。它提供了可靠的消息传递机制,以确保消息的可靠性和一致性。以下是两个常见的高并发消息队列中间件的介绍: 1. Kafka: Kafka是一个分布式流处理平台,也是一个高吞吐量的分布式发布订阅消息系统。它具有以下特点: - 支持高并发:Kafka能够处理大量的并发消息传递,可以同处理大量的生产者和消费者。 - 高可靠性:Kafka使用分布式存储和复制机制,确保消息的可靠性和持久性。 - 高扩展性:Kafka可以通过添加更多的代理节点来扩展处理能力,以适应不断增长的消息负载。 - 高性能:Kafka使用磁盘存储消息,可以提供非常高的吞吐量和低延迟。 2. DDMQ(滴滴消息队列): DDMQ是滴滴出行开源的高并发消息队列中间件,它提供了低延迟、高并发、高可用、高可靠的消息服务。DDMQ具有以下特点: - 多种消息类型:DDMQ支持实消息、延迟消息和事务消息等多种消息类型,以满足不同业务需求。 - 高可靠性:DDMQ使用分布式存储和复制机制,确保消息的可靠性和持久性。 - 高扩展性:DDMQ可以通过添加更多的代理节点来扩展处理能力,以适应不断增长的消息负载。 - 高性能:DDMQ使用高效的消息传递协议和优化的存储引擎,提供了低延迟和高吞吐量的消息传递能力。 这些高并发消息队列中间件可以帮助企业构建可靠、高效的消息传递系统,适用于各种高并发场景,如实数据处理、日志收集、分布式事务等。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值