kafka服务器默认接收最大消息,kafka安装及配置

最新推荐文章于 2024-07-08 20:34:16 发布

weixin_39996739

最新推荐文章于 2024-07-08 20:34:16 发布

阅读量393

点赞数

文章标签： kafka服务器默认接收最大消息

本文详细介绍了如何使用Kafka创建topic，列出已有的topic，以及生产与消费数据的过程，包括使用`kafka-topics.sh`、`kafka-console-producer.sh`和`kafka-console-consumer.sh`工具，以及不同版本的命令行参数。还展示了如何查看和删除topic信息。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、创建TOPIC

./kafka-topics.sh --create --zookeeper 192.168.244.128:2181,192.168.244.130:2181,192.168.244.131:2181 --replication-factor 3 --partitions 6 --topic kfk_test

2、列出创建的topic

./kafka-topics.sh --list --zookeeper 192.168.244.128:2181,192.168.244.130:2181,192.168.244.131:2181

3、生成数据

注意这里的端口号是kafka的端口 9092

./kafka-console-producer.sh -broker-list 192.168.244.128:9092,192.168.244.130:9092,192.168.244.131:9092 --topic kfk_test

4、消费生产数据

kafka 0.9版本之前用zookeeper

./kafka-console-consumer.sh --zookeeper 192.168.244.128:2181,192.168.244.130:2181,192.168.244.131:2181 --from-beginning --topic kfk_test

kafka 0.9版本之后不推荐zookeeper方式,仍然支持，但逐渐会被取消，推荐bootstrap-server方式

注意这里的端口号是kafka的端口 9092

./kafka-console-consumer.sh --bootstrap-server 192.168.244.128:9092,192.168.244.130:9092,192.168.244.131:9092 --from-beginning --topic kfk_test

5、查看指定topic信息

./kafka-topics.sh --describe --zookeeper 192.168.244.128:2181,192.168.244.130:2181,192.168.244.131:2181 --topic kfk_test

6、删除kafka中的topic

./kafka-topics.sh --delete --zookeeper 192.168.244.128:2181,192.168.244.130:2181,192.168.244.131:2181 --topic kfk_test

删除zookeeper中的topic信息

rmr /brokers/topics/kfk_test

rmr /config/topics/kfk_test

rmr /admin/delete_topics/kfk_test

rmr /consumers/kfk_test-group

删除topic数据相关的目录

rm -rf /var/local/kafka/data/kfk_test*