消息队列MQ调研笔记 Kafka & RabbitMQ & Pulsar

最新推荐文章于 2025-07-03 13:44:47 发布
最新推荐文章于 2025-07-03 13:44:47 发布
阅读量1k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 大数据挖掘与大数据应用案例 文章标签： MQ Kafka RabbitMQ Pulsar 消息队列
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/u012965373/article/details/97423038

 

功能

RabbitMQ

Kafka

Pulsar

备注

存储功能

不支持

支持

支持

 

特点

富Broker, 傻消费者

傻Broker, 富消费者

傻Broker, 富消费者

 

数据私有-Exclusive

不支持

不支持

支持

 

数据共享-Shared

支持

支持

支持

 
了解本专栏 订阅专栏 解锁全文
消息队列之六脉神剑：RabbitMQ、Kafka、ActiveMQ 、Redis、 ZeroMQ、Apache Pulsar对比和如何使用
Web3 & Basketball
08-01 1万+
消息队列（Message Queue）是一种异步通信机制，它将消息发送者和接收者解耦，从而提高了应用程序的性能、可扩展性和可靠性。在分布式系统中，消息队列经常被用于处理高并发、异步处理、应用解耦等场景。本篇回答将分析比较常见的六种消息队列：RabbitMQ、Kafka、ActiveMQ 、Redis、 ZeroMQ、Apache Pulsar。我们将讨论它们的应用场景、优缺点以及如何使用。
MQ~消息队列能力、AMQP协议、现有选择（Kafka、RabbitMQ、RocketMQ 、Pulsar）
Shangxingya的博客
06-22 1805
RabbitMQ 在吞吐量方面虽然稍逊于 Kafka、RocketMQ 和 Pulsar，但是由于它基于 Erlang 开发，所以并发能力很强，性能极其好，延时很低，达到微秒级。但是也因为 RabbitMQ 基于 Erlang 开发，所以国内很少有公司有实力做 Erlang 源码级别的研究和定制。如果业务场景对并发量要求不是太高（十万级、百万级），要求极高的低延迟，那这几种消息队列中，RabbitMQ 你可以选择使用。RocketMQ 和 Pulsar 支持强一致性。
RabbitMQ, Kafka和Pulsar (一)
pushme_pli的专栏
01-06 4454
因为要引入Notification机制和log的监控和查看，大概率是需要MQ这类工具，所以研究了下目前比较火热的开源的MQ软件： Rabbit MQ, Kafka还有Pulsar. 其实这三个软件虽说都适合MQ的场景，但是其实侧重点有很大的不同. RabbitMQ: 是AMQP（Advance Message Queuing protocol）的实现，是典型的消息中间件产品。它的特点是富br...
RabbitMQ关键性问题调研
wang_anqi的专栏
05-19 156
摘要：本篇是本人对RabbitMQ使用的关键性问题进行的调研，如性能上限、数据存储、集群等，             具体的RabbitMQ概念、使用方法、SpringAMQP配置，假设读者已有了基础。 1.      RabbitMQ 1.1  RabbitMQ数据速率问题 在边读边写的情况下：速率只与网络带宽正相关，网络使用率最高能达到接近100%，并且数据使用率很高（...
消息队列Pulsar详解
最新发布
刘皇叔说Java的博客
07-03 716
Pulsar = Kafka + RabbitMQ + 云原生能力的融合体性能强、功能全、架构现代，是下一代消息平台的有力选择。
RabbitMQ, Kafka和Pulsar (二)
pushme_pli的专栏
01-07 958
接上篇：RabbitMQ, Kafka和Pulsar (一) 我们用Kafka试试同样的需求。 之前提到Kafka天生支持消息存储和回看，Kafka中的概念有： Producer： 消息生产者 Topic： 接受Producer产生的消息，存储消息，每个Topic下都会有若干Partition。 Partition： 是Topic下的概念，是一个有序的存储队列，唯一的作用是增加Topic...
RabbitMQ, Kafka和Pulsar (三)
pushme_pli的专栏
01-08 2232
接上两篇： RabbitMQ, Kafka和Pulsar (一) RabbitMQ, Kafka和Pulsar (二) 今天我们看看Pulsar Pulsar算是非常新的一个挑战者，目标直指Kafka。官网的文档挺完善的，整个项目主要是用Java完成的，但因为比较新，所以网上很难找到有价值的讨论和问题的解决。 其实对比Pulsar和Kafka，就目前来看，很难看出优势在哪里，按照一般的理...
Kafka调研
weixin_43060848的博客
05-23 463
文章目录1. Kafka概述1.1 Kafka消费模式1.1.1 点对点模式1.1.2 发布/订阅模式1.2 Kafka的基础架构 1. Kafka概述   Kafka 是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域，如海量日志的处理。 1.1 Kafka消费模式   Kafka的消费模式主要有两种：一种是一对一的消费，也即点对点的通信，即一个生产者一个消费者。第二种为一对多的消费，即一个消息发送到某个Topic的消息队列，所有订阅了的消费者从该队列中
【Kafka专栏 12】实时数据流与任务队列的较量 ：Kafka与RabbitMQ有什么不同
weixin_40736233的博客
06-15 1036
Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。它主要被设计为一个高吞吐量的分布式发布订阅消息系统，可以处理消费者在网站中的所有动作流数据。Kafka以其高吞吐量、低延迟和分布式架构等特性，在大数据领域的实时计算以及日志采集方面被大规模使用。高吞吐量：Kafka能够处理大量的数据，每秒可以处理数百万条消息。这使得它非常适合用于大数据处理和实时计算场景。低延迟：Kafka具有极低的消息处理延迟，可以确保数据在系统中的实时传输和处理。分布式架构。
kafka、storm、flink、apex、spark五种流式大数据系统调研报告
06-21
本文主要调研了Apache Kafka、Apache Flink、Apache Storm、Apache Apex和Apache Spark Streaming五种流式大数据系统。主要的工作有：1）通过文献阅读和试用比较了它们的实现原理；2）利用了kafka自带的测试脚本进行了kafka性能测试；3）通过Hibench进行了Flink、Storm和Spark Streaming的比较测试；4）进行了Apex的简单测试；5）对以上流式大数据系统进行了总结分析。
kafka技术调研
adermxl的专栏
05-05 963
最新对kafka的相关技术进行了调研，其中很多的设计思想很不错，后面准备出一个系列的专题介绍相关内容，敬请启动。
Kafka、RabbitMQ、Pulsar、RocketMQ基本原理和选型
李姓门徒
04-16 2436
消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，削峰填谷等问题。实现高性能、高可用、可伸缩和最终一致性架构。 针对常见的消息队列进行探讨，并比较kafka、rabbitmq、rocketmq、pulsar这几种消息队列的异同，以及相关使用场景
关键技术之ActiveMQ调查阶段一
hansen1159的专栏
07-01 313
1、ActiveMQ的特性1.1 ActiveMq 的特性　多种语言和协议编写客户端。语言: Java, C, C++, C#, Ruby, Perl, Python, PHP。应用协议: OpenWire,Stomp REST,WS Notification,XMPP,AMQP完全支持JMS1.1和J2EE 1.4规范 (持久化,XA消息,事务)对Spring的支持,ActiveMQ可以很容易内...
最新基准测试：Kafka、Pulsar-和-RabbitMQ-哪个最快？(1)
2401_84267528的博客
04-14 1177
些内容对你有帮助，可以添加V获取：vip1024b （备注软件测试）**[外链图片转存中…(img-W2BnezL7-1713037846177)]
Apache Kafka、Apache Pulsar和RabbitMQ性能测试对比
weixin_47082274的博客
08-28 2219
Apache Kafka、Apache Pulsar和RabbitMQ都可以用作消息中间件平台，可对比的项目非常多，但是通常最关心的就是性能。在本文中，将专注于系统的吞吐量和延迟，因为这些是生产中事件流系统的主要性能指标。吞吐量测试尤其可以衡量每个系统在利用硬件（特别是磁盘和CPU）方面的效率。延迟测试可衡量每个系统与实时消息传递之间的接近程度，其中包括高达p99.9％的尾部延迟，这是实时和关键业务系统以及微服务架构的核心要求。 从测试结果来看，Kafka提供了最佳的吞吐量，同时提供最低的端到端延迟，最高可
最新基准测试：Kafka、Pulsar 和 RabbitMQ 哪个最快？
xingduan5153的博客
09-11 510
作者 | Alok Nikhil 、Vinoth Chandar 译者 | 平川 策划 | Tina 推荐阅读： 这套Github上40K+star学习笔记，可以帮你搞定95%以上的Java面试 毫不夸张的说，这份SpringBoot学习指南能解决你遇到的98%的问题 最全面试题新鲜出炉：70+算法题、近30种大厂面试笔试常考知识点 Apache Kafka 是最流行的事件流处理系统之一。...
最新基准测试：Kafka、Pulsar-和-RabbitMQ-哪个最快，2024年最新分享面经
2401_83620927的博客
04-11 1107
注软件测试）**[外链图片转存中…(img-8jLCtlCM-1712778739350)]
Mq-pulsar消息中间件
皮皮皮的代码
04-14 558
1. 介绍 【kafka同一个group 消费两个topic吗_Pulsar与Kafka消费模型对比】
消息队列MQ选型：ActiveMQ、RabbitMQ、Kafka与RocketMQ解析
"MQ技术选型涉及消息队列的基础知识、模式分类、应用场景及优势，主要讨论了点对点模式和发布/订阅模式，并列举了几种主流的MQ产品，如ActiveMQ、RabbitMQ、Kafka和RocketMQ。" MQ技术是现代企业IT系统中的关键组件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

杨鑫newlfe

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值