kafka 操作中

Kafka操作指南：命令详解

最新推荐文章于 2025-06-26 15:08:50 发布

小桥

最新推荐文章于 2025-06-26 15:08:50 发布

阅读量1.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： kafka 文章标签： kafka

本文链接：https://blog.youkuaiyun.com/qiaochao911/article/details/40921415

kafka 专栏收录该内容

9 篇文章

订阅专栏

本文介绍了Kafka的一系列操作命令，包括查看topic信息、创建指定备份和分区的topic、删除topic配置、修改分区、使用zkConnector监控消费情况、删除topic及注意事项，特别提醒0.8.1版本后的删除topic方法和数据清除策略。

kafka的一些操作命令：

查看所有topic的信息

./kafka-topics.sh --zookeeper 127.0.0.1/kafka --describe

查看某个topic的信息

 ./kafka-topics.sh --zookeeper 127.0.0.1/kafka --describe --topic mine-topic

创建一个topic 指定备份是3,分区数是6,topic-level配置retention.ms

./kafka-topics.sh --zookeeper 127.0.0.1/kafka --create --partitions 6 --replication-factor 3 --topic mine-topic --config retention.ms=8640000

删除topic_level配置

./kafka-topics.sh --zookeeper 127.0.0.1/kafka --alter --topic mine-topic --deleteConfig retention.ms

修改分区(注意：目前不支持topic减少分区的数量或改变的备份数)

./kafka-topics.sh --zookeeper 127.0.0.1/kafka --alter --partitions 36 --topic mine-topic

通过zkConnector消费可以通过命令得到消费量，topic最新offset 以及积压量

./kafka-run-class.sh kafka.tools.ConsumerOffsetChecker -zkconnect 127.0.0.1/kafka -topic mine-topic -group groupname

命令删除某个topic（这个删除后，后台还需要手动删除kafka数据文件中checkpoint的2个文件中对应的信息，然后删除zk上config/topics中的信息，必要是要重启broker，删除要谨慎），删除kafka某个topic的数据可以将此topic的topic_level的失效时间先改小数据删除之后再改大即可。

./kafka-run-class.sh kafka.admin.DeleteTopicCommand --zookeeper 127.0.0.1/kafka --topic mine-topic

在0.8.1版本之后提供了delete topic方法（官方说明发现问题可以给他们反映）

./kafka-topics.sh --zookeeper zk_host:port/chroot --delete --topic my_topic_name