Kafka性能测试-kafka-producer/consumer

hanjihun88

于 2020-04-21 14:48:38 发布

阅读量1.2k

点赞数

文章标签：数据库

本文链接：https://blog.youkuaiyun.com/hanjihun88/article/details/105657991

版权

本文详细介绍了如何进行Kafka的性能测试，包括使用kafka-producer-perf-test.sh进行生产者性能测试，解释了各项参数，并展示了执行结果。同样，也探讨了kafka-consumer-perf-test.sh消费者性能测试的命令和参数，以及如何通过kafka-consumer-groups.sh命令查看消费组状态和消费详情。此外，还提到了如何查看Zookeeper中的所有topic和创建topic的命令。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.写入数据命令（以下所有命令必须在kafka/bin目录下面执行）
./kafka-producer-perf-test.sh --topic newgameMG–num-records 1000000 --record-size 2000 --throughput 500000 --producer-props bootstrap.servers=172.18.3.94:9099,172.18.3.179:9099,172.18.3.177:9099

kafka-producer-perf-test.sh 脚本命令的参数解析（以100w写入消息为例）：
–topic topic名称，本例为test_perf
–num-records 总共需要发送的消息数，本例为100000
–record-size 每个记录的字节数，本例为2000
–throughput 每秒钟发送的记录数，本例为500000
–producer-props bootstrap.servers=172.18.3.94:9099,172.18.3.179:9099,172.18.3.177:9099（发送端的配置信息，可在kafka的config目录，以该项目为例：/usr/local/kafka/config；查看server.properties中配置的zookeeper.connect的值，默认端口：9092）

执行结果如下
在这里插入图片描述