Rocket MQ 结构体系

Rocket MQ 结构体系

image

Overview 概述

Apache RocketMQ是一个低延迟、高性能和可靠的分布式消息中间件。由四部分组成:names server名字服务器、brokers经纪人、producers生产者、cosumers消费者。并且每个组成部分都可以水平扩展。

NameServer Cluster 名字服务集群

Name servers 提供轻量级查找与路由服务。第个name server记录完整的路由信息,提供对应的读或者写操作服务,并且支持快速存储扩展。

Broker Cluster 经纪人集群

Brokers通过提供轻量的TOPIC和QUEUE机制进行消息存储。它们支持Push和Pull模型,包含容错机制,加强了尖端与容量的填充。另外,Brokers提供灾备恢复,数据统计,和预警机制等传统消息系统中所欠缺部分。

Producer Cluster 生产者集群

Producers支持分布式发布。分布式的producers通过多重负载均衡模型向bokers集群发送消息。

Consumer Cluster 消费者集群

Consumers集群在Push/Pull模型中同样支持分布式发布。同时也支持集群消费与消息广播。它提供实时消息订阅机制可以满足绝大部分消费需求。

NAMESERVER 名字服务器

NameServer是一个完全的功能服务,主要包含两点:

  • Broker Management:NameServer接收来自Broker集群的注册,同时提供心跳机制来检查Broker是否还存活。
  • Routing Management:每个NameServer都会持有全部的Broker集群路由信息和客户端请求队列信息。

RocketMQ客户端(Producer/Consumer)会向NameServer请求排队路由信息,但是客户端怎么找到NameServer的地址呢?有如下四种方式:

  • 编程方式,如:producer.setNamesrvAddr(“ip:port”).
  • JAVA选项,使用:rocketma.namesrv.addr.
  • 环境变量,使用:NAMESRV_ADDR.
  • HTTP Endpoint.

更多关于怎么找到NameServer地址细节,点击here.

BROKER SERVER 经纪人(代理)服务器

Broker 服务负责消息的存储和发送,消息查询,高可用集群保证等等。

image

Broker服务包含一些重要的子模块:

  • Remoting Module:broker服务的入口,处理来自客户端的请求。
  • Client Manager:管理客户端(生产者和消费者),维护消费者的主题订阅。
  • Store Service:提供存储到物理磁盘和从物理磁盘读取消息的简单API。
  • HA Service:提供主Broker与从Broker服务之间的数据同步功能。
  • Index Service:给指定的key创建索引并且提供快带查询。
### RabbitMQRocketMQ 的功能对比及适用场景 #### 功能对比 RabbitMQ 是一种基于 AMQP 协议的消息中间件,具有丰富的消息路由能力以及对多种协议的支持。其核心优势在于灵活性和多协议兼容性[^1]。相比之下,RocketMQ 则专注于高性能、高吞吐量的需求,在大规模分布式环境中表现出色。以下是两者的主要功能差异: - **消息协议支持** - RabbitMQ 支持多种消息协议(如 AMQP、STOMP、MQTT 等),这使得它能够适应更广泛的客户端环境和应用场景。 - RocketMQ 主要针对内部自定义协议优化,虽然也提供了 REST 接口扩展,但在跨协议适配方面不如 RabbitMQ 多样化。 - **性能表现** - RabbitMQ 在低延迟的小规模应用中有较好的表现,但由于其实现机制的原因,在极高并发下可能面临性能瓶颈。 - RocketMQ 经过阿里巴巴多年双十一活动验证,具备极高的吞吐能力和稳定性,特别适合处理海量数据流的任务。 - **持久性和可靠性** - RabbitMQ 提供了灵活的持久化选项,并且可以通过镜像队列实现高可用配置。 - RocketMQ 同样强调消息的可靠传递,采用主从同步复制技术保障数据安全,同时支持事务消息以满足强一致性要求。 - **管理工具** - RabbitMQ 自带一个易于使用的 Web UI —— Management Plugin ,方便用户查看节点状态、队列详情等信息。 - 对于 RocketMQ 而言,则有专门开发的 RocketMQ Console 工具,除了基础运维操作外还增加了更多高级特性比如流量分析图表展示等功能[^3]。 #### 适用场景 根据上述特点可以得出如下结论关于两者的最佳实践领域: - **RabbitMQ 更加契合以下情况:** - 需求涉及复杂的交换器模式或者定制化的消费逻辑; - 应用程序需要对接不同类型的通信标准 (例如 IoT 设备常用 MQTT ) ; - 小型项目或团队希望快速搭建起稳定可靠的异步通讯框架而无需过多关注底层细节 . - **RocketMQ 更倾向于应用于这些场合:** - 实时日志采集平台构建; - 广告投放系统中的点击事件追踪记录存储; - 社交网络好友动态推送服务架构设计等等一切追求极致效率的大数据相关业务环节 . ```python # 示例代码片段展示了如何创建简单的生产者/消费者模型(伪代码形式) from rocketmq.client import Producer, Message producer = Producer('group_name') producer.set_namesrv_addr('localhost:9876') msg = Message('TestTopic', body=b'Hello World!') result = producer.send_sync(msg) print(f'Send Result Status:{result.status}') ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值