【Kafka】 WARN Error while fetching metadata with correlation id xx : {UNKNOWN_TOPIC_OR_PARTITION}

已于 2023-12-20 22:32:32 修改
阅读量1.1w 收藏 2
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 2025最新-大数据-kafka 文章标签： kafka linq 分布式
于 2020-07-04 10:26:09 首次发布
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.youkuaiyun.com/qq_21383435/article/details/105087504
本文介绍了在使用Kafka时遇到的`UNKNOWN_TOPIC_OR_PARTITION`错误，详细分析了可能的原因，包括主题未创建、写入时topic名称为空格、元数据获取失败等场景，并提供了相应的解决办法，如检查hosts文件配置、确认topic是否存在及初始化数据等。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

了解本专栏 订阅专栏 解锁全文
【Kafka】报错：Error while fetching metadata with correlation id 1 : {topic_lcc=LEADER_NOT_AVAILABLE}
九师兄
12-04 8552
1.美图 2.背景 CDH环境下报错，看我们的应用程度读取kafka信息报错。 错误信息如下 Error while fetching metadata with correlation id 1 : {topic_lcc=LEADER_NOT_AVAILABLE} 对方配置如下 集群启动后如下 3. 解决方法1 3.1 原因 获取相关ID为xx的元数据时出错 3.2 问题解决 修改...
【kakfa】kafka 2.x 控制台消费报错 UNKNOWN_TOPIC_OR_PARTITION、删除不存在、创建提示存在
最新发布
九师兄
05-07 238
然后他的kafka集群有5台机器，挂了2台，然后他们把kerberos都先关闭了，但是挂的怎么都无法重启成功。20231228日，我负责的一个现场环境，整个环境中病毒了，毒性很深，30多台机器全崩溃的，而且是kerberos认证的环境。而且这个环境有个神奇的地方，重新创建这个topic会报错，提示topic已经存在，但是你又查不到这个topic。因为上面原因，我们消费数据有问题，然后我们消费数据的时候出现问题，因此我就打算重建topic，步骤如下。后面运维手动处理了一下元数据，才呢个查出来。
WARN Error while fetching metadata with correlation id 5 : {testtopic=LEADER_NOT_AVAILABLE}
liuhehe的博客
07-14 4088
当生产数据的时候，报错如下：提示没有可用的kafka 主节点 root@ubuntu-130:/opt/kafka_2.11-0.11.0.2/bin# ./kafka-console-producer.sh --broker-list 192.168.13.130:9092 --topic testtopic >hello [2019-07-14 23:42:47,318] WARN ...
kafka生产者报错：[org.apache.kafka.clients.NetworkClient:600] - Error while fetching metadata with corre
毅香雪海的博客
12-14 2978
在测试kafka写入数据的时候一直在报错： ... [org.apache.kafka.clients.NetworkClient:600] - Error while fetching metadata with correlation id 589: {TEST_RECEIVE_TOPIC=UNKNOWN_TOPIC_OR_PARTITION} [org.apache.kafka.clients.NetworkClient:600] - Error while fetching met...
【Kafka】报错：Error while fetching metadata with correlation id 1 : {xxxtopic=LEADER_NOT_AVAILABLE}
程序人生
08-05 3224
通过java spring boot 访问kafka, 异常错误：Producer clientId=producer-1] Error while fetching metadata with correlation id 5 : {xxxxTopic=UNKNOWN_TOPIC_OR_PARTITION
大数据-kafka学习笔记_error while fetching metadata with correlation id
2401_84185106的博客
04-08 3247
外链图片转存中…(img-3djsPkFd-1712574094642)]
kafka消费报错 UNKNOWN_TOPIC_OR_PARTITION
小驴
05-06 1万+
2022-05-06 13:50:38.624 [kafka-producer-network-thread | producer-1] LEVEL.WARN [traceId:] o.apache.kafka.clients.NetworkClient.handleSuccessfulResponse(1070) - [Producer clientId=producer-1] Error while fetching metadata with correlation id 6823 : {inv
kafka源码2-元数据
strong_yu的博客
11-23 1019
从前面我们看到，生产者在发送数据时，首先是更新元数据，这次分析一下更新元数据的流程 ，首先生产者是怎么保存元数据的 元数据结构 Metadata对象 public final class Metadata implements Closeable { private static final Logger log = LoggerFactory.getLogger(Metadata.class); public static final long TOPIC_EXPIRY_MS = 5 * 60 * 1
Kafka的Producer报错：Fetching topic metadata with correlation id 0 for topics
u013933879的博客
08-09 1万+
问题 在向Kafka生产消息时，报错：Fetching topic metadata with correlation id 0 for topics [Set(game-etl-finished-topic)] from broker [id:0,host:192.168.90.83,port:9093] failed 排查过程 出现问题之前做了一个操作：中断了一次消费程序后再生产数据...
WARN Error while fetching metadata with correlation id 1 : {first=LEADER_NOT_AVAILABLE} (org.apache.
zuodingquan666的博客
09-01 2454
搭建Kahka集群的时候，创建生产者是遇到的问题，大坑，所以记录下来 报错： 其实就是无法识别leader，那么就是当前主机变得无法识别 解决方法： 配置listeners，后面接本机的ip地址就好。 如果你是集群的话，其他服务器上kafka也按照这个步骤来就好了 测试： 结果：生产者生产信息成功，消费者消费信息成功。 ...
WARN Error while fetching metadata with correlation id 0 : {testtopic=LEADER_NOT_AVAILABLE}
wbxd
05-09 2216
centos6.5+kafka2.11 配置好的Kafka创建生产者时出现下面的错误 root@ubuntu-130:kafka/bin# ./kafka-console-producer.sh --broker-list 192.168.0.14:9092 --topic testtopic >hello [2019-07-14 23:42:47,318] WARN Error while fetching metadata with correlation id 1 : {testtopic=.
WARN Error while fetching metadata with correlation id 13 : {test=LEADER_NOT_AVAILABLE}
oneslide
02-13 6499
添加如下文件到server.properties: port = 9092 advertised.host.name = localhost 参考：StackOverFlow-leader not available kafka in console producer 日志解析 INFO KafkaConfig values: advertised.host.name = null ...
WARN [Producer clientId=console-producer] Error while fetching metadata with correlation id
top8488.top大数据
08-21 7730
kafka 下面报错 WARN [Producer clientId=console-producer] Error while fetching metadata with correlation id 原因： 1.很有可能是网络防火墙的问题，关闭或者配置相关ip通行（节点本身也要放行） 2.配置server.properties 新增或者修改 advertised.listeners=PLAINTEXT://你的ip:9092 ...
flume报错WARN clients.NetworkClient: Error while fetching metadata with correlation id
zhi_yin的博客
01-25 1668
项目场景： 修改linux系统时间，模拟使用flume读取日志文件，并把日志文件信息传输给kafka消费，kafka消费之后，再使用flume读取kafka消费后的日志信息， 问题描述： flume在读取kafka的消费日志信息后，发现flume报错，测试topic_start,topic_event时发现正常，而flume报错如下： 21/01/22 20:51:54 WARN clients.NetworkClient: Error while fetching metadata with corre
WARN Error while fetching metadata with correlation id 1 : {hotitems=LEADER_NOT_AVAILABLE}
Knight
07-01 1488
进入conf/server.properties 把这行注释取消 加上自己的ip地址 亲测有效
kafka报错Error while fetching metadata with correlation
huaxia2002的博客
08-25 1万+
kafka报错 server.log输出: Error when handling request {topics=[indexing]} (kafka.server.KafkaApis) kafka.admin.AdminOperationException: replication factor: 1 larger than available brokers: 0 运行kafka-console-producer.sh 输出 WARN Error while fetching metadata wit
kafka:UNKNOWN_TOPIC_OR_PARTITION
热门推荐
高矮
08-23 3万+
Error while fetching metadata with correlation id 11 : {xxxx=UNKNOWN_TOPIC_OR_PARTITION} 可能原因： topic不存在，切自动创建失败 设置： auto.create.topics.enable=true ...
大数据-kafka学习笔记_error while fetching metadata with correlation id(1)
2401_84185471的博客
04-12 1028
• batch.size：批次大小，默认16k• linger.ms：等待时间，修改为5-100ms默认是0ms，就是数据一到队列中就发给broker，这样的好处就是实时性好，但是效率低，一次发几条数据总比一次发一条效率高。也不能改太大，太大时效性不好。• compression.type：压缩snappy压缩数据，这样一批次就可以存更多的数据• RecordAccumulator：缓冲区大小，可修改为64m。
Error while fetching metadata with correlation id 37 : {flink_kafka9=LEADER_NOT_AVAILABLE}
03-25
A: 这个错误说明无法从Kafka获取元数据，可能是由于Kafka没有可用的leader节点导致的。建议检查Kafka集群的状态和配置，并确保所有节点都在运行且相互通信。如果问题仍然存在，可能需要更新Kafka版本或调整配置。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值