JMeter压测请求Kafka并发送数据

已于 2022-03-15 12:19:06 修改
阅读量8k 收藏 21
点赞数
CC 4.0 BY-SA版权
分类专栏： JAVA 性能调优 接口测试 文章标签： kafka java 分布式
于 2022-03-15 12:13:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/hui_yong/article/details/123498954
本文介绍了如何使用JMeter进行Kafka的压测，通过在JMeter中添加Java请求并配置Kafka参数，实现数据的发送。同时，文章提供了服务端消费者监听消息的方法，确保消息正确消费。最后，讨论了线程组并发数的设定以适应不同项目需求。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

因为需要测试风控决策引擎，需要使用JMeter往Kafka中灌入数据，但是如果手动一条条json进去那就累死个人，解决方法就是通过JMeter发送数据到kafka并进行消费，废话不多说，看下面流程

  1. 首先在下载jmeter到本地，在lib-》ext目录中导入一个kafkameter.jar包，如下图：
    在这里插入图片描述

jar包下载地址：https://download.youkuaiyun.com/download/hui_yong/84834292

  1. 插入jar之后，打开JMeter进行操作了，首先新建一个Thread group，在线程组下面添加一个Java request：
    在这里插入图片描述

  2. 在Java request中Class name选择下拉列表，这就是你导入到ext目录中的jar，配置Kafka参数如下图（找你们开发要）：
    在这里插入图片描述

发送消息：

最低0.47元/天 解锁文章

200万优质内容无限畅学
JMeter向kafka发送数据
qq_48811377的博客
09-27 706
项目测试服务消费Kafka能力，需要消费特定格式的数据，因此要向Kafka中灌入数据，给老铁们分享下jmeter向kafka发送数据方法：1. 首先在jmeter如下目录中导入一个kafka相关的jar包，如图：2. 导入之后就可以打开JMeter进行操作了，首先在线程组中添加一个java请求：在java请求中Class name选择kafkaProducerSampler中，然后配置好Kafka的相关参数：kafka_brokers：kafka地址kafka_topic：传入的主题。
jmeter向kafka中写入数据
最新发布
HOG_Glory的博客
05-20 245
1、安装组件2、新建线程组3、配置元件加kafkaProduceConfig4、取样器添加添加KafkaProducerSampler这里topic我配置的logTranfer5、执行脚本页面显示收到数据（感觉可以加上CPU这些查看性能）
jmeter-backend-listener-kafka：一个JMeter插件，使您可以将测试结果发送到Kafka服务器
01-30
jmeter后端侦听器kafka 一个JMeter插件，使您可以将测试结果发送到Kafka服务器。 总览 描述 JMeter后端监听器Kafka是一个JMeter插件，使您可以将测试结果发送到Kafka服务器。 它受JMeter 后端侦听器插件的启发。 产品特点 筛选器 仅使用过滤器发送所需的样品！ 只需在相应的字段中按如下所示键入它们： filter1;filter2;filter3或sampleLabel_must_contain_this 。 特定字段field1;field2;field3 指定要发送到Kafka的字段（以下可能的字段）： 所有线程 身体尺寸 字节数 已发送字节 连接时间 内容类型 数据类型 错误计数 GrpThreads 空闲时间 潜伏 响应时间 样本数 SampleLabel 线程名 网址 响应码 TestStartTime SampleStartTime SampleEndTime 时间戳记 喷油器主机名 详细，半详细，仅错误和安静模式： debug ：发送所有采样器的请求/响应信息（标题，正文等） info ：将所有采样器发送到Ka
Jmeter向kafka发送数据
钰树霖风
02-14 5618
Jmeter连接kafka并生成脚本在linux后台运行
安全测试｜如何使用burpsuite+xray实现联动测试
伤心的辣条
04-01 1110
安全测试过程中手动分析测试与xray自动化扫描测试结合，这样可以从多层保障安全测试的分析，针对平台业务接口量大的安全测试是十分有用的，可以实现双向测试同时开始。
【kafka】使用jmeter压测kafka并发性能
weixin_36142042的博客
02-09 2565
1、idea中开发kafka并发测试需要的扩展包 由于jmeter的jms模块并不支持kafka，因此需要扩展开发 引入jmeter <dependency> <groupId>org.apache.jmeter</groupId> <artifactId>ApacheJMeter_core</artifactId> <version>5.4.1&l
JMeter进行Apache Kafka负载测试
weixin_30425949的博客
05-11 1004
1.卡夫卡负载测试 在这个Apache Kafka教程中，我们将了解如何使用Apache JMeter，如何在Apache Kafka上执行Kafka负载测试。此外，这个Kafka负载测试教程教我们如何配置生产者和消费者，这意味着使用JMeter开发ApacheKafka Consumer和Kafka Producer。最后，我们将看到在Jmeter中构建Kafka负载测试场景。然而，在Ka...
Jmeter Kafka插件开发之Sampler篇
C'mon的博客
05-14 3280
Jmeter Kafka插件开发之Sampler篇 背景:在项目中经常需要往kafka里面写数据，并拿生成的数据执行后续的操作，并且有些接口中也需要用到kafka里的数据，小编使用JMeter做接口测试，于是在网上找了下发现有一个插件是java sampler 界面不太友好，故萌发了写个JMeter Kafka插件的想法。 界面如下: Ps:小编公司对kafka进行了二次封装，不...
全面指南：使用JMeter进行性能压测与性能优化（中间件压测、数据库压测、分布式集群压测、调优）
skvjw的博客
09-22 5857
缓存是一种存储机制，用于临时存储经常访问的数据，以减少数据获取的延迟和降低数据库或后端服务的负载。缓存可以存在于客户端（如浏览器缓存）、服务器端（如内存缓存）或分布式缓存系统中。
jmeter简单压测kafka
zwrlj527的专栏
12-13 1933
就是笔记，自己备忘，也希望博友一次能找到2个方案，帮到大家。
jmeter.backendlistener.kafka-1.0.1.jar
08-23
jmeter后端侦听器kafka 一个JMeter插件，使您可以将测试结果发送到Kafka服务器
jmeter-kafka-container:用于卡夫卡负载测试的JMeter容器
04-13
JMeter容器，用于Kafka负载测试 该容器可以部署到Docker Engine或OpenShift容器平台中。 这提供了一个灵活的JMeter容器，用于在容器平台上对Kafka进行负载测试。 支持参数 以下是支持参数。 有关下面列出的一些Kafka设置的可能的可配置值，请参阅。 参数 描述 默认 JMETER_THREADS JMeter线程/用户数 1个 BOOTSTRAP_SERVERS Kafka引导服务器（bootstrap.servers） 本地主机：9092 BATCH_SIZE Kafka批次大小（batch.size） 16384 LINGER_MS Kafka Linger（毫秒）（linger.ms） 1个 BUFFER_MEMORY 卡夫卡缓冲存储器（buffer.memory） 33554432 确认 卡夫卡（Kafka）袜子 1个
jmeter集成kafka测试
主攻大数据 人工智能 物联网 安全 低空经济等方向。mtsc 、gtest特邀分享嘉宾
10-19 1424
kafkameter-0.2.2 放到jmeter安装路径下的lib/ext中。创建topic 创建topic名为test，分区数为8，副本数为1。通过jmeter集成kafka配置好对应的。以上三个属性对于kafka来讲都很重要。查看kafka的topic。消费者-指定group。
jmeter 压测 kafka
u012954380的博客
09-13 1574
jemter 使用了第三方的依赖包来实现kafka 消息发送 第三方包为kafkameter， 需要使用maven 命令打包，官方有说明 kafkameter-0.2.0.jar 官方地址 jemter 版本 apache-jmeter-5.2 官方地址 将kafkameter-0.2.0.jar 放入到 apache-jmeter-5.2\lib\ext 目录 jemter 添加 java请求 点击启动就可以发送消息了...
JMeter发送数据到Kafka
谜
12-13 8537
最近为了简单做一下性能测试，开始使用JMeter了，因为要先往Kafka中灌入数据，毕竟没用过JMeter，就在网上各种搜，发现写的都不是自己所需要的那种，即使是有的博客看着好像是符合自己要求，但是还要自己操作导包，好麻烦…于是就像部门的测试请教了一下，轻松2步搞定。 首先在jmeter如下目录中导入一个kafka相关的jar包，如下图： jar包免费下载地址：资源正在审核，待审核完成补充上。...
使用Jmeter对Kafka进行性能测试
魔都虫师的博客
07-23 1449
最近消息队列要换成Kafka，作为一个测试人员，应工作要求，需要对Kafka进行性能测试，那么开干吧，了解它，测试它。在这里把自己学习和使用的一些经验记录在本文中，研究如何去使用Apache JMeter测试Kafka。 首先，先来了解一下什么是Kafka。 A Brief Overview of Apache Kafka 在一个大型的分布式系统中，通常有很多服务生成不同的事件：日志、监视数据、可疑用户操作等等。在Kafka中，这些被称为生产者Producer。另一方面，有些服务需要生成的...
【亲测免费】 JMeter测试Kafka插件kafkameter-0.2.0.jar
gitblog_09753的博客
10-12 438
JMeter测试Kafka插件kafkameter-0.2.0.jar 【下载地址】JMeter测试Kafka插件kafkameter-0.2.0.jar 本仓库提供了一个用于JMeter测试Kafka的插件文件：`kafkameter-0.2.0.jar`。该jar包是使用JMeter发送数据到Kafka时所需的资源文...
JMeter支持的协议
01-15
### JMeter 支持的主要协议 #### HTTP 和 HTTPS 协议 作为最常用的网络协议之一，JMeter 提供了全面的支持来处理基于这两种协议的应用程序。这使得它成为测试 Web 应用和服务的理想选择[^3]。 ```python from requests import get response = get('https://example.com', verify=True) # 使用HTTPS请求示例 print(response.status_code) ``` #### 数据库连接 (JDBC) 对于需要验证数据库操作性能的情况，JMeter 可以通过 JDBC 驱动与多种关系型数据库建立连接并执行查询语句[^1]。 #### 远程过程调用 (SOAP/WebService) 除了 RESTful API 外，JMeter 同样能够发送 SOAP 请求来进行 XML 格式的 Web Service 测试[^5]。 #### 轻量级目录访问协议 (LDAP) 当涉及到身份认证服务时，利用 LDAP 插件可实现对企业内部用户管理系统效率的评估。 #### Java 消息服务 (JMS) 面向消息中间件的消息传递机制也是被覆盖在内的范围之内，适用于 MQ 类产品的压测场景。 #### 文件传输协议 (FTP) 支持 FTP 的读写命令，特别是针对大文件上传下载的速度测量很有帮助；值得注意的是，在配置项中有选项区分对待文本流还是二进制数据。 #### 扩展性与其他自定义协议 得益于其灵活架构设计以及活跃社区贡献的各种第三方插件，像 gRPC 或者 Kafka 等新兴通信方式同样可以在适当安装相应组件之后得到良好兼容。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

智真s

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值