kafka里面的topic消费情况查看

最新推荐文章于 2025-06-10 11:02:37 发布
最新推荐文章于 2025-06-10 11:02:37 发布
阅读量4.2w 收藏 25
点赞数 2
CC 4.0 BY-SA版权
分类专栏： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/hanlanshenlan/article/details/91047459
本文介绍如何通过Zookeeper和Kafka消费者组命令检查Kafka主题的消费情况，包括使用Zookeeper客户端查看消费者组，以及利用kafka-consumer-groups.sh脚本详细展示主题的消费进度、偏移量和滞后的消息数量。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

kafka里面的topic消费情况查看


1.进入zookeeper的客户端界面：./zkCli.sh(在zookeeper目录的bin下）

查看目录：ls /consumers

2.kafka的bin目录下执行：

./kafka-consumer-groups.sh --describe --group xiothub_jtm2m_rawdata_210_xgit_m2m_jt_LOCAL --zookeeper localhost:2181

xiothub_jtm2m_rawdata_210_xgit_m2m_jt_LOCAL 是上面从zookeeper中查询出来的consumer

标记解释：

TOPIC
 
PARTITION
 
CURRENT-OFFSET
 
LOG-END-OFFSET
 
LAG
 
CONSUMER-ID
 
HOST
 
CLIENT-ID
topic名字分区id当前已消费的条数总条数未消费的条数消费id主机ip客户端id

 

 

Kafka系列:查看Topic列表、消息消费情况
NIO4444
04-29 4万+
grep -Ev '^$|^#' config/server.properties Kafka系列:查看ZK Zookeeper地址 查看所有topic /app/kafka/kafka_2.12-2.1.0/bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --list 查看kafka指定topic的详情 bin/...
查询Kafka集群中消费组（group）信息和对应topic的消费情况
私聊前往站内信：https://i.youkuaiyun.com/#/msg/chat/weixin_44976692
06-18 4万+
通过上述方法，可以方便地查询Kafka集群中的消费组信息和topic的消费情况，从而更好地管理和监控Kafka集群的运行状态。希望这篇博客对你有所帮助！如果有更多问题，欢迎留言讨论。
如何查看Kafka的Topic消费情况
qq_36862125的博客
07-27 8290
2.10为Scala版本，0.10.0.2.5.3.0为kafka版本。进入kafka安装目录，然后执行以下命令。从某一时间开始消费某一topic。从最开始开始消费某一topic。或者不指定日志输出位置和设置。
Kafka如何查看topic的数据
最新发布
喝醉酒的小白
06-10 2012
Kafka如何查看topic的数据
kafka查看topic数据消费情况
怪只怪满眼尽是人间烟火
02-08 7670
1.查询消费者ID： ./kafka-consumer-groups.sh --bootstrap-server 127.0.0.1:9092 --list 2：查看消费情况 ./kafka-consumer-groups.sh --describe --bootstrap-server 127.0.0.1:9092 --group cdc-consumer-group TOPIC PARTITION CURRENT-OFF.
kafka 查看 topic 消费情况
热门推荐
wjavadog的博客
08-06 6万+
Kafka Kafka 查看消费情况 不同的kafka版本不一致，运行的命令也是不同的 首先找到 kafka 的运行路径 运行方式一： ./kafka-consumer-groups --zookeeper localhost:2181 --describe --group groupName 运行方式二： ./kafka-run-class.sh kafka.tools.ConsumerOff...
kafka监听topic消费_kafka监控之topic的lag情况监控
weixin_39851974的博客
12-22 676
需求描述：lag(滞后)是kafka消费队列性能监控的重要指标，lag的值越大，表示kafka的堆积越严重。本篇文章将使用python脚本+influxdb+grafana的方式对kafka的offset、logsiz和lag这三个参数进行监控，并以图形化的方式进行展现。架构描述：使用python收集kafka的相关信息并存储到influxdb里；配置grafana，将influxdb里的数据以图...
springboot整合kafka，指定分区发送，批量消费，指定topic分区消费
09-26
在本文中，我们将深入探讨如何在Spring Boot 2.x应用程序中整合Apache Kafka，重点是实现指定分区发送、批量消费以及指定topic分区消费的功能。Apache Kafka是一个分布式流处理平台，广泛用于构建实时数据管道和流...
Kafka【使用篇】01：Kafka中Topic的操作、Kafka中的生产者和消费者
weixin_40612128的博客
03-13 3737
Kafka中Topic的操作、Kafka中的生产者和消费者
kafka系列之：使用python消费kafka Topic数据
zhengzaifeidelushang的博客
03-20 3154
kafka系列之：使用python消费kafka Topic数据一、创建kafka Consumer二、查看kafka集群所有Topic三、查看分区四、查看分区信息五、查看当前消费的Topic六、获取当前消费者可消费的偏移量七、获取当前Topic最大的偏移量八、获取当前kafka topic、分区和分区偏移量九、重置偏移量十、根据重置的偏移量消费数据十一、使用python消费kafka Topic数据完整详细注释代码 一、创建kafka Consumer kafkaBrokers = ["10.129.1
查看kafka消息消费情况
Hello World
01-10 8785
查看主题命令 展示topic列表 ./kafka-topics.sh --list --zookeeper 172.18.153.12:2188 描述topic ./kafka-topics.sh --describe --zookeeper 172.18.153.12:2188 --topic test 查看topic某分区偏移量最大（小）值 ./kafka-run-class.sh kafk...
kafka监控topic消费
老蔡Code
01-11 9808
一、KafkaOffsetMonitor监控 安装 1.wget https://github.com/quantifind/KafkaOffsetMonitor/releases/download/v0.2.1/KafkaOffsetMonitor-assembly-0.2.1.jar 2.启动 java -cp KafkaOffsetMonitor-assembly-0.2
Kafka系列：查看Topic列表、消息消费情况、模拟生产者消费者
YJ000312的博客
03-29 4万+
这条命令其实并不执行删除动作，仅仅是在zookeeper上标记该topic要被删除而已，同时也提醒用户一定要提前打开delete.topic.enable开关，否则删除动作是不会执行的。a）在server.properties中设置delete.topic.enable参数为ture。3.执行删除命令：rmr /brokers/topics/test。2.找到topic所在目录：ls /brokers/topics。执行topic删除命令时，出现提示。
kafka查看topic中的数据_两种实现方式 | 如何查看消费者组的消费情况
weixin_39538607的博客
12-03 2万+
回复“资源”领取独家整理的学习资料！每一个成功人士的背后，必定曾经做出过勇敢而又孤独的决定。放弃不难，但坚持很酷~版本：kafka_2.11-1.1.0本文提供两种方式来查看消费者组的消费情况，分别通过命令行和 java api 的方式来消费 __consumer_offsets 。一、通过命令行来查看消费情况查看 kafka 消费者组列表：./bin/kafka-consumer-groups....
kafka 查看topic消费
dyq51的博客
08-02 1万+
  sudo su su kafka 加证书前： cd home/kafka/software/kafka/bin ./kafka-console-consumer.sh --zookeeper localhost:2181 --topic  monitor --from-beginning 加证书后： cd home/kafka/software/kafka/ ./bin/kaf...
kafka查看Topic列表及消费状态等常用命令
manong20210713的博客
08-29 1万+
　　本文中的操作均基于kafka_1.3.3.0，且所有命令经过实际验证。 2|0常用工具 新建Topic ./kafka-topics --zookeeper 166.188.xx.xx --create --topic flink_source --partitions 1 --replication-factor 1 replication-factor： 指定副本数量 partitions：指定分区 删除Topic ./kafka-topics --zoo
如何查看kafka里面有没有对应数据
09-15
Kafka提供了命令行工具，比如`kafka-console-consumer`，通过这个工具可以订阅特定的Topic来查看其中的消息。使用以下命令可以查看Topic中的消息： ```bash kafka-console-consumer.sh --bootstrap-server <kafka...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值