RocketMQ


在ConsumerOffsetManager中,存储了topic@group 对应的每一个MessageQueue 的offset信息。  【topic@group ->(queueId,offset)】

内存结果如下,采用fastjson进行序列化。

  private ConcurrentHashMap<String/* topic@group */, ConcurrentHashMap<Integer, Long>> offsetTable =
        new ConcurrentHashMap<String, ConcurrentHashMap<Integer, Long>>(512);


在TopicConfigManager 中存储了topic 与TopicConfig信息。 即该broker存储有关topic的元数据。同时存储了版本信息DataVersion

public class TopicConfig {
    private static final String SEPARATOR = " ";
    public static int defaultReadQueueNums = 16;
    public static int defaultWriteQueueNums = 16;
    private String topicName;
    private int readQueueNums = defaultReadQueueNums;
    private int writeQueueNums = defaultWriteQueueNums;
    private int perm = PermName.PERM_READ | PermName.PERM_WRITE;
    private TopicFilterType topicFilterType = TopicFilterType.SINGLE_TAG;
    private int topicSysFlag = 0;
    private boolean order = false;

}

topic内存数据结构如下,采用fastjson序列化。

    private final ConcurrentHashMap<String, TopicConfig> topicConfigTable =
        new ConcurrentHashMap<String, TopicConfig>(1024);
    private final DataVersion dataVersion = new DataVersion();


SubscriptionGroupManager 存储了consumer 的group信息。  groupName->SubscriptionGroupConfig 映射关系。


public class SubscriptionGroupConfig {


    private String groupName;


    private boolean consumeEnable = true;
    private boolean consumeFromMinEnable = true;


    private boolean consumeBroadcastEnable = true;


    private int retryQueueNums = 1;


    private int retryMaxTimes = 16;


    private long brokerId = MixAll.MASTER_ID;


    private long whichBrokerWhenConsumeSlowly = 1;


    private boolean notifyConsumerIdsChangedEnable = true;

}


内存数据结构如下:

    private final ConcurrentHashMap<String, SubscriptionGroupConfig> subscriptionGroupTable =
        new ConcurrentHashMap<String, SubscriptionGroupConfig>(1024);
    private final DataVersion dataVersion = new DataVersion();


ScheduleMessageService  也存储一部分数据结果,目前不详。







### RocketMQ 消息队列使用指南与最新版本下载 RocketMQ 是一款高性能、高可靠的分布式消息中间件,广泛应用于大规模数据处理和高并发场景中。它支持多种消息类型,包括普通消息、顺序消息、事务消息等,并提供了灵活的消息过滤机制和强大的消息堆积能力。 在使用 RocketMQ 时,首先需要根据业务需求选择合适的消息类型和通信模式。例如,生产者可以通过 `DefaultMQProducer` 类发送消息,而消费者则通过 `DefaultMQPushConsumer` 类订阅并消费消息。此外,RocketMQ 支持广播和集群两种消费模式,适用于不同的应用场景[^3]。 以下是一个简单的 RocketMQ 生产者代码示例: ```java import org.apache.rocketmq.client.exception.MQClientException; import org.apache.rocketmq.client.producer.DefaultMQProducer; import org.apache.rocketmq.common.message.Message; public class Producer { public static void main(String[] args) throws MQClientException, InterruptedException { // 实例化一个生产者组 DefaultMQProducer producer = new DefaultMQProducer("ProducerGroupName"); // 设置NameServer地址 producer.setNamesrvAddr("localhost:9876"); // 启动生产者实例 producer.start(); for (int i = 0; i < 10; i++) { try { Message msg = new Message("TopicTest", "TagA", "OrderID188".getBytes()); producer.send(msg); } catch (Exception e) { e.printStackTrace(); } } // 关闭生产者实例 producer.shutdown(); } } ``` 对于消费者的实现,可以参考如下代码片段: ```java import org.apache.rocketmq.client.consumer.DefaultMQPushConsumer; import org.apache.rocketmq.client.consumer.listener.*; import org.apache.rocketmq.common.message.MessageExt; public class Consumer { public static void main(String[] args) throws MQClientException { // 实例化消费者组 DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("ConsumerGroupName"); // 设置NameServer地址 consumer.setNamesrvAddr("localhost:9876"); // 订阅主题及标签 consumer.subscribe("TopicTest", "*"); // 注册监听器处理消息 consumer.registerMessageListener((MessageListenerConcurrently) (msgs, context) -> { for (MessageExt msg : msgs) { System.out.println("收到消息:" + new String(msg.getBody())); } return ConsumeConcurrentlyStatus.CONSUME_SUCCESS; }); // 启动消费者 consumer.start(); System.out.println("消费者已启动"); } } ``` 关于 RocketMQ 的安装与配置,可以从官方网站或 GitHub 仓库获取最新的源码或二进制文件。当前最新稳定版本为 **4.9.4**(截至2023年),可以通过访问 [RocketMQ GitHub Releases 页面](https://github.com/apache/rocketmq/releases) 下载所需的版本。安装完成后,还需配置 NameServer 和 Broker 服务以构建完整的消息队列环境[^1]。 为了更好地管理和监控 RocketMQ 集群,推荐安装 RocketMQ 控制台(RocketMQ Dashboard)。该图形界面工具可以帮助开发者直观地查看队列状态、管理主题以及跟踪消息轨迹。控制台的安装通常涉及克隆项目仓库、修改配置文件中的 NameServer 地址,并运行应用服务器(如 Tomcat)来部署 WAR 文件[^1]。 最后,在实际开发过程中,建议将 RocketMQ 的操作封装成独立的服务组件,以便于维护和扩展。例如,在 ASP.NET Core 应用程序中,可以通过依赖注入的方式创建 RocketMQ 服务类,从而实现更优雅的消息处理逻辑[^4]。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值