RocketMQ是什么

最新推荐文章于 2025-08-18 20:18:45 发布
原创 最新推荐文章于 2025-08-18 20:18:45 发布 · 1w 阅读 · 17 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

RocketMQ是一款分布式消息中间件，提供严格的消息顺序保证、多种拉取模式、高效扩展能力和实时订阅机制。具备亿级消息堆积、集群无单点、支持大规模队列及消息失败重试等功能，广泛应用于异步处理、解耦、最终一致性场景。
部署运行你感兴趣的模型镜像

消息服务的应用场景：

  • 异步
  • 解耦
  • 最终一致性
  • 并行

RocketMQ是什么？ 

 RocketMQ 是一款分布式、队列模型的消息中间件，具有以下特点：   

  • 能够保证严格的消息顺序

  • 提供丰富的消息拉取模式

  • 高效的订阅者水平扩展能力

  • 实时的消息订阅机制

  • 亿级消息堆积能力
选择RocketMQ的理由：
  • 强调集群模式无单点，可扩展，任意一点高可用，水平扩展
  • 海量数据的堆积能力，消息堆积后，写入延迟低
  • 支持上万个队列
  • 消息失败重试机制
  • 消息可查询
  • 开源社区灵活
  • 成熟度（支持阿里双十一）
服务部署：
1. 环境说明：

IP

主机名

角色

架构模式

192.168.0.10

rocketmq-master1

namserserver

brokerserver

Master1(双Master模式)

192.168.0.11

rocketmq-master2

namserserver

brokerserver

Master2(双Master模式)

2. 修改/etc/hosts 文件
192.168.0.10 rocketmq-nameserver1
192.168.0.10 rocketmq-master1
192.168.0.11 rocketmq-nameserver2
192.168.0.11 rocketmq-master2
3. 系统架构图


4. RocketMQ的安装
下载地址：点击打开链接（上传192.168.0.10、192.168.0.11）


两台服务分次解压：

tar xvzf alibaba-rocketmq-3.2.6.tar.gz  -C  /usr/local





4. RocketMQ的配置

mkdir   /usr/local/alibaba-rocketmq/store
mkdir  /usr/local/alibaba-rocketmq/store/commitlog
mkdir  /usr/local/alibaba-rocketmq/store/consumequeue
mkdir  /usr/local/alibaba-rocketmq/store/index

1）修改Master1的服务
#vi /usr/local/rocketmq/conf/2m-noslave/broker-a.properties
brokerClusterName=rocketmq-culster //两台服务的集群名称一定要一样
brokerName=broker-a     //节点名称
brokerId=0    //等于0Master,大于0 slave
namesrvAddr=mqnameserver1:9876;mqnameserver2:9876  //nameserver 地址

2)  修改Master2的服务
#vi /usr/local/rocketmq/conf/2m-noslave/broker-b.properties
brokerClusterName=rocketmq-culster //两台服务的集群名称一定要一样
brokerName=broker-a     //节点名称
brokerId=0    //等于0 Master,大于0 slave
namesrvAddr=mqnameserver1:9876;mqnameserver2:9876  //nameserver 地址

3)  修改两台服务的JVM参数（RocketMQ 堆内存不能小于1G）
#vi /usr/local/alibaba-rocketmq/bin/runserver.sh
#vi /usr/local/alibaba-rocketmq/bin/runbroker.sh
JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512m -XX:PermSize=128m -XX:MaxPermSize=320m"

4)  修改两台服务的log日志
# mkdir /usr/local/alibaba-rocketmq/logs/
# cd /usr/local/alibaba-rocketmq/conf && sed -i  's#${user.home}#/usr/local/alibaba-rocketmq/logs/data#g' *.xml
logback_broker.xml
logback_filtersrv.xml
logback_namesrv.xml
logback_tools.xml
   --- 这个配置log文件目录将会改变

5)  启动nameserver1 nameserver2 brokerserver1 brokerserver2 依次启动

#nohup sh mqnamesrv &  --启动nameserver
#nohup sh mqbroker -c ../conf/2m-noslave/broker-a.properties  >/dev/null 2>&1 &  --启动brokerserver

6)  查看状态(jps)
     查看日志：tail  -f /usr/local/alibaba-rocketmq/logs/rocketmqlogs/broker.log
                         tail  -f /usr/local/alibaba-rocketmq/logs/rocketmqlogs/namesrv.log
     



5. RocketMQ控制台的安装

环境：Tomcat 7.0、rocketmq-console.war（我的资源去下载）
1） 安装Tomcat 
  #tar xvzf  apache-tomcat-7.0.73.tar.gz  -C  /usr/local




2)    新建目录rocketmq-console
  #mkdir  /usr/local/apache-tomcat-7.0.73/webapps/rocketmq-console
  # 上传rocketmq-console.war 到webapp 下
 #unzip rocketmq-console.war  rocketmq-console
 # vi  /usr/local/apache-tomcat-7.0.73/webapps/rocketmq-console/WEB-INF/classes/config.properties
     rocketmq.namesrv.addr=192.168.0.10:9876;192.168.0.11:9876





您可能感兴趣的与本文相关的镜像

Stable-Diffusion-3.5

Stable-Diffusion-3.5

图片生成
Stable-Diffusion

Stable Diffusion 3.5 (SD 3.5) 是由 Stability AI 推出的新一代文本到图像生成模型，相比 3.0 版本，它提升了图像质量、运行速度和硬件效率

RocketMQ - 什么是RocketMQ
yang的博客
05-23 924
RocketMQ是一个低延时、高可靠、可伸缩、易于使用的分布式消息中间件，是由阿里巴巴开源捐献给Apache的顶级项目。RocketMQ具有高吞吐、低延迟、海量消息堆积等优点，同时提供顺序消息、事务消息、定时消息、消息重试于追踪等功能，非常适合在电商、金融等领域使用。
RocketMQ全面详解：从核心概念到高性能实战
最新发布
才这么点的博客
10-14 378
RocketMQ是阿里巴巴开源的高性能分布式消息中间件，支持亿级消息处理，广泛应用于大数据实时计算、日志收集等场景。其核心架构包括NameServer（路由中心）、Broker（消息存储）、Producer（生产者）和Consumer（消费者）四大组件，采用Topic和Queue实现消息分类与并行处理。本文详细介绍了RocketMQ的安装配置、核心概念以及基础使用，包括Java客户端的消息收发示例代码，帮助开发者快速掌握RocketMQ的基本原理与实战应用。
RocketMQ-介绍
Logan的博客
08-10 4038
RocketMQ概述 1、RocketMQ简介 RocketMQ是一个统一消息引擎、轻量级数据处理平台。 RocketMQ是一款阿里巴巴开源的消息中间件。2016年11月28日，阿里巴巴向 Apache 软件基金会捐赠 RocketMQ，成为 Apache 孵化项目。2017 年 9 月 25 日，Apache 宣布 RocketMQ孵化成为 Apache 顶 级项目（TLP ），成为国内首个互联网中间件在 Apache 上的顶级项目。 官网地址：http://rocketmq.apache.org 2、R
RocketMQ 是什么？
ruanhao1203的专栏
05-05 2736
目录 1、RocketMQ 是什么？ 2、RocketMQ 物理部署结构 3、RocketMQ 逻辑部署结构 1、RocketMQ 是什么？ 是一个队列模型的消息中间件，具有高性能、高可靠、高实时、分布式特点。 Producer、Consumer、队列都可以分布式。 Producer 向一些队列轮流发送消息，队列集合称为 Topic，Consumer 如果做广播消费，则一个 Co...
搞懂什么是RocketMQ
05-15 2302
前言 我们在上一篇中给大家介绍了系统中引入消息队列的必要性，也了解了一些消息队列的基础知识，我们也提到了一些比较常见的问题，并且简单聊了下，那我们在实际的开发中，使用频率最高的消息中间件是哪些呢？ 接下来我们介绍RocketMQ，前身是MetaQ，现在叫RocketMQ，阿里这是希望它像中国的嫦娥一样上天可能，还是挺不错的名字 RocketMQ的项目架构 由于RocketMQ是Java开发的，我们也便于读懂源码以及解决问题，先来简单看下它的项目结构： rocketmq-broker：接受生产者发来的消.
RocketMQ 是什么？它的架构是怎样的？和 Kafka 有什么区别？
weixin_43281498的博客
08-12 2132
"和"
RocketMQ 是什么
秋天的博客
03-05 5132
最近 RocketMQ 刚刚上生产环境，闲暇之时在这里做一些分享，主要目的是让初学者能快速上手RocketMQ。 RocketMQ 是什么 Github 上关于 RocketMQ 的介绍： RcoketMQ 是一款低延迟、高可靠、可伸缩、易于使用的消息中间件。具有以下特性： 支持发布/订阅（Pub/Sub）和点对点（P2P）消息模型 在一个队列中可靠的先进先出（FIFO）和严格的顺序传递 ...
RocketMQ 基础教程-MQ概述
smart_an的专栏
06-23 1028
MQ，Message Queue，是一种提供消息队列服务的中间件，也称为消息中间件，是一套提供了消息生产、存储、消费全过程API的软件系统。消息即数据。一般消息的体量不会很大。
RocketMQ—（总结）一篇就搞懂 RocketMQ
m0_60721514的博客
10-11 1915
rocketMq 作为低延迟、高并发、高可用、高可靠的分布式消息中间件，其详细知识点非常多，如需深入，建议源码入坑。【这里想说，因为自己也走了很多弯路过来的，所以才下定决心整理，收集过程虽不易，但想到能帮助到一部分自学java 的人，心里也是甜的！有需要的伙伴请点㊦方】↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓↓。
RocketMQ是什么？
qq_42985657的博客
08-18 753
RocketMQ 是面向。
RocketMQ作用
weixin_50874007的博客
01-17 922
应用解耦(技术上必须弄好才能使用MQ ) 快速应用变更维护 流量削锋(削峰填谷)
什么是RocketMQ？
我能在河边钓一整天的鱼
03-19 820
RocketMQ简介 Apache RocketMQ是一个采用Java语言开发的分布式的消息系统，由阿里巴巴团队开发，与2016年底贡献给Apache，成为Apache的一个顶级项目。在 2017 年的双十一当天，整个阿里巴巴集团通过 RocketMQ 流转的线上消息达到了 万亿级，峰值 TPS 达到5600 万，在阿里大中台策略上发挥着举足轻重的作用 。 Roc...
RocketMQ是什么（二）
u011393781的博客
09-28 1062
7.RocketMQ关键特性 （1）单机支持1万以上持久化队列 1.所有数据单独存储到一个Commit Log，完全顺序写，随机读。 2.对最终用户展现的队列实际只存储消息在Commit Log的位置信息，并且串行方式刷盘。 这样好处： a、队列轻量化，单个队列的数据量非常少。 b、对磁盘的访问串行化，避免磁盘竞争，不会因为队列增加导致IO wait 增高。 每个方案
RocketMQ是什么，具体在springboot简单应用案例
w2369110547的博客
02-18 1156
RocketMQ是阿里巴巴开源的一款分布式消息中间件，具有高吞吐量、高可用性、低延迟等特点，广泛应用于大规模分布式系统中。它支持消息的发布/订阅模式、消息顺序传递、事务消息等功能，适用于多种场景，如异步通信、应用解耦、流量削峰等。通过以上步骤，你可以在 Spring Boot 中轻松集成 RocketMQ，实现消息的发送和接收。RocketMQ 提供了丰富的功能和灵活的配置选项，能够满足不同场景下的需求。在 Spring Boot 中集成 RocketMQ 时，配置文件（如或。
RocketMQ学习 专题总结(一)
taylor的博客
09-23 2553
RocketMQ 专题RocketMQ 专题一1. MQ介绍1.2 MQ的优点和缺点1.3 各种MQ产品的比较2. RocketMQ快速入门2.1 准备工作2.1.1 下载RocketMQ2.2.2 环境要求2.2 安装RocketMQ2.2.1 安装步骤2.2.2 目录介绍2.3 启动RocketMQ2.4 测试RocketMQ2.4.1 发送消息2.4.2 接收消息2.5 关闭RocketMQ...
RocketMQ
gyqinag的专栏
03-26 589
原文链接： https://blog.youkuaiyun.com/liitdar/article/category/8685240
rocketmq是什么
02-28
<think>嗯，用户之前让我对比Redis和MySQL，现在又问我RocketMQ是什么。看起来他们可能是在学习或工作中需要了解不同的技术组件，尤其是消息队列。用户可能已经对数据库和缓存有了一定的了解，现在想扩展到消息队列，特别是RocketMQ。我需要先确定RocketMQ的核心概念，然后解释它的用途、架构以及适用场景。 首先，RocketMQ是阿里开源的分布式消息中间件，属于消息队列系统。用户可能想知道它的基本功能，比如消息的发送、存储和消费。需要和之前提到的Redis对比，可能Redis也有消息队列的功能，但RocketMQ更专业。 接下来，用户可能关心RocketMQ的主要特点，比如高吞吐量、高可用性、可靠性、顺序消息、事务消息等。需要详细说明这些特性，以及它们在实际应用中的优势。比如，事务消息可以用于分布式事务场景，确保数据一致性。 然后，架构部分，RocketMQ由NameServer、Broker、Producer、Consumer组成。NameServer负责服务发现，Broker存储消息，Producer发送消息，Consumer消费消息。需要解释每个组件的作用和它们之间的协作流程，可能用流程图或示意图帮助理解。 适用场景也很重要，用户可能想知道什么时候应该选择RocketMQ而不是其他消息队列，比如Kafka或RabbitMQ。需要比较它们的差异，比如RocketMQ在事务消息和顺序消息方面的优势，适合电商、金融等需要高可靠性的场景。 另外，用户可能对RocketMQ的部署和运维感兴趣，比如集群搭建、监控、故障处理等。可能需要简要提及，但不用太深入，除非用户有进一步的问题。 还要注意用户的技术背景，可能不是特别深入，所以需要用通俗易懂的语言，避免过多专业术语。同时结合之前的Redis和MySQL对比，说明消息队列在系统架构中的位置和作用，比如解耦、异步处理、流量削峰等。 最后，是否需要给出一些实际的使用示例或者最佳实践？比如如何用RocketMQ处理订单创建和库存扣减的异步流程，或者如何保证消息不丢失。这些例子能帮助用户更好地理解理论概念。 总之，回答需要结构清晰，先定义RocketMQ，再讲解核心特性、架构、应用场景，对比其他技术，最后可能给出使用建议。确保内容准确，同时易于理解。</think>### **RocketMQ 核心解析** #### **1. 定义与定位** - **本质**：阿里巴巴开源的**分布式消息中间件**（2012年开源，2017年成为Apache顶级项目） - **核心能力**：实现系统间**异步解耦**、**流量削峰**、**数据顺序性保障** - **对标产品**：Kafka、RabbitMQ（但设计更贴合互联网业务场景） --- #### **2. 核心特性** | **特性** | **说明** | |------------------|-------------------------------------------------------------------------| | **高吞吐** | 单机支持10万+ TPS，集群可扩展至百万级（通过**多副本分片**实现） | | **严格顺序** | 同一队列（MessageQueue）内消息顺序存储与消费（适用于订单状态流转等场景）| | **事务消息** | 支持**分布式事务**（两阶段提交），保障业务与消息发送的一致性 | | **延时消息** | 支持消息定时投递（精度：秒级），如30分钟后关闭未支付订单 | | **消息回溯** | 可重新消费指定时间点的历史消息（排查问题或修复数据） | | **高可用** | 基于**主从架构**+**Dledger选举协议**，实现故障自动切换（99.95% SLA） | --- #### **3. 核心架构** ```mermaid graph TB Producer[生产者] -->|发送消息| Broker[(Broker集群)] Consumer[消费者] -->|拉取消息| Broker NameServer[NameServer集群] -->|注册与发现| Broker NameServer -->|获取路由信息| Producer NameServer -->|获取路由信息| Consumer subgraph Broker内部结构 BrokerMaster[Master节点] -->|同步数据| BrokerSlave[Slave节点] CommitLog[(CommitLog)] --> 存储原始消息 ConsumeQueue[ConsumeQueue] --> 消息逻辑队列索引 IndexFile[(IndexFile)] --> 消息关键词索引 end ``` ##### **关键组件** 1. **NameServer** - 轻量级服务发现组件（无状态） - 维护Topic与Broker的映射关系（类似Kafka的ZooKeeper，但更轻量） 2. **Broker** - 消息存储与转发核心节点 - 数据持久化到磁盘（CommitLog顺序写，性能优化关键） 3. **Producer/Consumer** - 生产者支持多种发送模式（同步、异步、单向） - 消费者支持集群消费（负载均衡）和广播消费模式 --- #### **4. 典型应用场景** 1. **电商订单系统** - **场景**：用户下单 → 发送订单消息 → 异步触发库存扣减、物流调度、支付通知 - **优势**：通过**削峰填谷**应对秒杀活动的高并发写入，MySQL仅处理最终持久化 2. **金融交易对账** - **场景**：支付成功消息 → RocketMQ → 对账系统消费（保证**严格顺序**，避免金额错乱） 3. **物联网数据采集** - **场景**：百万级设备上报数据 → RocketMQ缓冲 → 批量写入HBase/ClickHouse - **优势**：高吞吐支撑突发流量，避免直接压垮存储系统 4. **分布式事务** - **示例**： ```java // 事务消息伪代码 TransactionMQProducer producer.sendMessageInTransaction(msg, new LocalTransactionExecutor() { @Override public LocalTransactionState execute(Message msg) { // 1.执行本地业务（如扣减库存） if (inventoryService.reduceStock()) { return LocalTransactionState.COMMIT; // 提交消息 } else { return LocalTransactionState.ROLLBACK; // 回滚消息 } } }); ``` --- #### **5. 性能优化设计** - **写入优化** - **顺序写盘**：所有消息追加到CommitLog（避免磁盘随机I/O） - **页缓存加速**：利用Linux PageCache提升读写效率（避免JVM GC影响） - **读取优化** - **零拷贝技术**：通过`mmap`或`sendfile`减少数据拷贝次数 - **消费队列分片**：单个Topic拆分为多个MessageQueue，并行消费 --- #### **6. 与Kafka关键差异** | **维度** | **RocketMQ** | **Kafka** | |----------------|---------------------------------------|------------------------------------| | **消息延迟** | 毫秒级（支持更多实时场景） | 毫秒级（两者相当） | | **事务消息** | 原生支持 | 依赖Kafka Streams或外部协调 | | **消息回溯** | 按时间戳精确回溯 | 仅支持Offset回溯（需自行维护时间映射）| | **运维复杂度** | 自带控制台（可视化监控） | 依赖第三方工具（如Kafka Manager） | | **适用场景** | 业务消息（电商、金融） | 日志流处理（大数据场景） | --- #### **7. 学习与实践建议** 1. **快速体验** ```bash # 单机部署 wget https://archive.apache.org/dist/rocketmq/4.9.4/rocketmq-all-4.9.4-bin-release.zip unzip rocketmq-all-4.9.4-bin-release.zip nohup bin/mqnamesrv & # 启动NameServer nohup bin/mqbroker -n localhost:9876 & # 启动Broker ``` 2. **生产注意事项** - **集群部署**：至少2主2从（跨机房容灾） - **监控指标**：关注堆积量（ConsumerOffset滞后）、Broker磁盘水位 - **容灾演练**：定期模拟主节点宕机，验证自动切换是否正常 --- **总结**：RocketMQ是支撑互联网高并发场景的“消息高速公路”，其**顺序消息**和**事务消息**设计尤其适合需要强一致性的业务系统。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值