RocketMQ 《Deflater compress 》

最新推荐文章于 2025-06-19 14:03:02 发布

jack.lei11231

最新推荐文章于 2025-06-19 14:03:02 发布

阅读量344

点赞数

CC 4.0 BY-SA版权

分类专栏：中间件文章标签： rocketMQ

本文链接：https://blog.youkuaiyun.com/qq_34597894/article/details/98961781

中间件专栏收录该内容

5 篇文章

订阅专栏

本文深入探讨了RocketMQ的消息压缩方案，详细解析了在消息发送过程中如何使用Deflater压缩算法来减少数据传输量，提高系统效率。同时，文章提到了RocketMQ源码中其他值得研究的部分，如openmessage消息规范和netty在网络层的应用。

最近在看RecketMQ源码，这里记录一下rocketMQ压缩方案

如下：

在调sendKernelImpl的时候调用了如下

源码如下：

 ByteArrayOutputStream byteArrayOutputStream = new ByteArrayOutputStream(src.length);
        java.util.zip.Deflater defeater = new java.util.zip.Deflater(level);
        DeflaterOutputStream deflaterOutputStream = new DeflaterOutputStream(byteArrayOutputStream, defeater);
        try {
            deflaterOutputStream.write(src);
            deflaterOutputStream.finish();
            deflaterOutputStream.close();
            result = byteArrayOutputStream.toByteArray();
        } catch (IOException e) {
            defeater.end();
            throw e;
        } finally {
            try {
                byteArrayOutputStream.close();
            } catch (IOException ignored) {
            }

            defeater.end();
        }

        return result;

消息发送的时候会进行一个消息压缩，采用的是 Deflater的压缩算法。

除了这些，源码有很多值得记录和学习的地方例如openmessage消息规范，netty用于系统网络层交互例如（namesrv 和 producer等之间的交互，服务端是怎么根据topicName选举一个queue使用的），此文作为记录篇的第一篇，后续会逐渐输出。