消息队列 MQ

消息队列（Message Queue，简称 MQ）是阿里巴巴集团中间件技术部自主研发的专业消息中间件，产品基于高可用分布式集群技术，提供消息发布订阅、消息轨迹查询、定时（延时）消息、资源统计、监控报警等一系列消息云服务，是企业级互联网架构的核心产品。MQ 历史超过9年，为分布式应用系统提供异步解耦、削峰填谷的能力，同时具备海量消息堆积、高吞吐、可靠重试等互联网应用所需的特性，是阿里巴巴双11使用的核心产品。

MQ 目前提供 TCP、HTTP、MQTT 三种协议层面的接入方式，支持Java、C++ 以及.NET 不同语言，方便不同编程语言开发的应用快速接入 MQ消息云服务。用户可以将应用部署在阿里云 ECS、企业自建云，或者嵌入到移动端、物联网设备中与 MQ 建立连接进行消息收发，同时本地开发者也可以通过公网接入 MQ服务进行消息收发。

1. MQ 产品功能

特色功能：

1. 事务消息，实现类似 X/Open XA 的分布事务功能，以达到事务最终一致性状态。

2. 定时（延时）消息允许消息生产者指定消息进行定时（延时）投递，最长支持40天。

3. 大消息，目前默认支持最大 256KB 消息，华北2地域支持最大 4MB消息。

4. 消息轨迹，通过消息轨迹，用户能清晰定位消息从发布者发出，经由 MQ 服务端，投递给消息订阅者的完整链路，方便定位排查问题。

5. 广播消息，允许一个 Consumer ID 所标识的所有 Consumer 都会各自消费某条消息一次。

6. 顺序消息，允许消息消费者按照消息发送的顺序对消息进行消费。

7. 重置消费进度，根据时间重置消费进度，允许用户进行消息回溯或者丢弃堆积消息。

 

消息类型：普通消息、定时（延时）消息、事务消息和顺序消息

三种发送消息：可靠同步发送、可靠异步发送、单向发送

管理多维：消息查询、消息回溯、消息轨迹、堆积监控报警

性能优越：百亿级堆积能力、低延迟、毫秒级投递、支持高并发、高性能集群支持

服务健壮：99.9999976%数据可靠性、99.9999.。。%服务可用性、消失失败定时重试、多机房多份存储

 

专有云部署

1.  专家定制，提供技术方案设计；专家现场技术支持与培训

2.  灵活部署，支持专有云独立部署，同时支持混合云架构。

3.  运维管控，专有云支持 mqadmin命令集、Open API运维管理工具，方便管控平台集成以及统一运维。

 

MQ 快速接入流程图：

面向服务端场景的应用使用 MQ，推荐用 SDK方式接入，操作简单且可用性高。而面向移动端的场景，推荐使用MQTT方式接入。MQTT 是移动端物联网领域的标准协议，因此MQ不提供 SDK。

2. MQ 产品优势

专业

1. 阿里内部产品名 MetaQ、Notify；开源社区产品名为RocketMQ；产品多次在国内外获奖。

2. 阿里内部 1000+ 核心应用使用，每天流转几千亿条消息，经过双11交易、商品等核心链路真实场景的验证，稳定可靠。

高可靠

1. 一份消息多份落盘存储，经过严格的断电测试，消息依然保证不丢失。

2. 允许海量消息堆积，单个 Topic 可堆积100亿+条消息，系统高流量压力下依然可靠。

3. 默认消息持久化存储 3天，支持重置消费位点消费3天之内任何时间点的消息。

高性能

1. 同一网络内，消息传输网络时延在 10毫秒之内，性能测试下，网卡可被打满。

2. 默认单 Topic 发送消息上限为每秒 5000条，最高可申请扩展至 10W以上。

3. 默认单条消息大小最大支持 256KB，华北2 地域支持 4MB大消息。

3.MQ 应用场景

·      1. 一对多，多对多异步解耦，基于发布订阅模型，对分布式应用进行异步解耦，增加应用的水平扩展能力。

·      2. 削峰填谷，大促等流量洪流突然来袭时，MQ 可以缓冲突发流量，避免下游订阅系统因突发流量崩溃。

·      3. 日志监控，作为重要日志的监控通信管道，将应用日志监控对系统性能影响降到最低。

·      4. 消息推送，为社交应用和物联网应用提供点对点推送，一对多广播式推送的能力。

·      5. 金融报文，发送金融报文，实现金融准实时的报文传输，可靠安全。

·      6. 电信信令，将电信信令封装成消息，传递到各个控制终端，实现准实时控制和信息传递。