Kafka入门(4) -- kafka基准测试

最新推荐文章于 2024-12-29 11:53:30 发布

原创最新推荐文章于 2024-12-29 11:53:30 发布 · 443 阅读

CC 4.0 BY-SA版权

文章标签：

148 篇文章 ¥49.90 ¥99.00

订阅专栏

本文介绍了Kafka的基准测试，包括1个分区1个副本、3个分区1个副本和1个分区3个副本的场景。通过创建topic、生产消息和消费消息的基准测试，探讨了不同配置下的性能表现。测试结果显示，在虚拟机环境下，分区和副本数量增加并不总能提升性能，有时甚至可能导致效率下降。

1. 基准测试

基准测试（benchmark testing）是一种测量和评估软件性能指标的活动。我们可以通过基准测试，了解到软件、硬件的性能水平。主要测试负载的执行时间、传输速度、吞吐量、资源占用率等。

测试步骤：

bin/kafka-topics.sh --zookeeper node1:2181 --create --topic benchmark --partitions 1 --replication-factor 1

在生产环境中，推荐使用生产5000W消息，这样会性能数据会更准确些。为了方便测试，课程上演示测试500W的消息作为基准测试。

bin/kafka-producer-perf-test.sh --topic benchmark --num-records 5000000 --throughput -1 --record-size 1000 --

了解本专栏