【RocketMQ源码分析】broker

核心功能

Broker是RocketMQ的核心，主要功能如下，包括：

1.接受Producer发过来的消息；

2.处理Consumer的消费信息请求；

3.消息的持久化存储；

4.消息的HA机制；

5.服务端的过滤功能。

基本概念

• Broker即是物理上的概念，也是逻辑上的概念。多个物理Broker通过IP:PORT区分，多个逻辑Broker通过BrokerName区分。
• 多个逻辑Broker组成Cluster。
• Broker与Topic是多对多的关系。
• Broker自身包含一个使用10911端口的NettyServer、一个10909的NettyServer，以及一个NettyClient。
• HA通过10912端口提供服务，用于Broker内部各个部分的数据传输。
• Broker是最重要的部分，包括持久化消息、Broker集群一致性(HA)、保存历史消息、保存Consumer消费偏移量、索引创建等。
• Producer发送来的消息最终会通过CommitLog序列化到硬盘，执行序列化逻辑的类为AppendMessageCallback接口的实现类。
• Broker序列化消息是顺序写，序列化文件保存在userHome/store/commitlog目录下，文件名为总偏移量。
  默认为异步刷盘、提交日志单个文件1个G、单个consumer队列文件为不到6M
• Broker通过PullMessageProcessor.processRequest()处理Consumer生成的消息。判断当前Broker是否允许读，从ConsumeQueue中的MappedFileQueue根据偏移量获得MappedQueue获取消息，从MappedQueue中根据偏移量获取消息返回。