Kafka配置broker映射错误报错Discovered coordinator xxx rack: null

最新推荐文章于 2025-03-31 20:55:18 发布

原创最新推荐文章于 2025-03-31 20:55:18 发布 · 3k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kafka #intellij-idea #分布式 #bug

本文介绍了一种常见的协调器报错现象及解决方法。错误表现为不断重复出现，并指出了问题根源在于 hosts 映射配置不正确。解决方案是在指定路径下调整 hosts 文件的内容。

出现下述报错且一直刷：
Discovered coordinator tbds-172-16-122-43:6667 (id: 2147482646 rack: null) 2
原因是hosts映射没配置好：
C:\Windows\System32\drivers\etc
在这里插入图片描述
改成这样既可

注意换行！！！

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

HH_JavaEE

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

【Kafka】kafka 卡死 Discovered coordinator xx:9092 (id: xxx rack: null) for group xxx

九师兄

12-09

1万+

1.背景构建了一个kafka消费组，然后 2020-12-09 21:55:22 [XNIO-1 task-120] INFO o.a.k.c.consumer.ConsumerConfig - ConsumerConfig values: metric.reporters = [] metadata.max.age.ms = 300000 partition.assignment.strategy = [org.apache.kafka.clients.consumer.RangeAssign.

【kafka】Kafka coordinator coordinator 原理剖析

九师兄

09-10

588

1.概述视频地址：https://www.bilibili.com/video/BV1M64y1D7NN?p=65 这里面有个知识点是我不知道的，就是一个消费组对应的offset是存储到内部topic中的一个分区内，我原先以为是所有的分区内都会产生。根据消费组hash取模后，可以准确的定位到消费组对应的内部分区的id，然后根据元数据信息能准确定位到具体是哪个机器的coordinator上。这里确定了Corrdinator的时候，大家都去注册，谁先注册成功，谁就是Leader Consumer.

参与评论您还未登录，请先登录后发表或查看评论

从kafka的Coordinator看组件设计

初心江湖路的博客

04-18

679

以下描述默指kafka 0.10对应版本，Coordinator 默指 GroupCoordinator 一、Coordinator是什么协调器二、干什么用故障探测和再平衡（Rebalance）在一个消费者组当中，每个消费者线程负责消费所订阅topic下的哪些分区，维护一个平衡消费的关系，使得组中的每个消费者负载均衡。故障探测指什么？每个consumer都和Coordinator建立连接...

Kafka 排查 Discovered coordinator XXXXX:9092 (id: 2147483647 rack: null) for group itstyle.

weixin_42226303的博客

06-29

1万+

报错信息： Discovered coordinator DESKTOP-NRTTBDM:9092 (id: 2147483647 rack: null) for group itstyle. 原因： windows 上运行的kafka 拿到的host是机器名而不是IP地址所以会导致报错 DESKTOP-NRTTBDM 是 Kafka 实例所在服务器的主机名而9092 是 kafka 的端口即 Kafka 的连接地址。解决方案直接修改本机 hosts 文件 windows 系统 hosts 文件位

命令消费kafka报错(id: -1 rack: null) disconnected

weixin_43697701的博客

03-28

9579

WARN clients.NetworkClient: [Consumer clientId=consumer-console-consumer-52833-1, groupId=console-consumer-52833] Bootstrap broker xx.xx.xx.xx:9092 (id: -1 rack: null) disconnected

【问题解决】Kafka报错 Bootstrap broker x.x.x.x:9092 (id: -1 rack: null) disconnected

拾级而上

05-09

1万+

Kafka报错 Bootstrap broker x.x.x.x:9092 (id: -1 rack: null) disconnected解决思路

SpringKafka无法提交offset问题：Group coordinator not available

SpringBoy的博客

05-28

4980

SpringKafka无法提交offset问题：Group coordinator not available 在使用SpringKafka时，无法提交offset，提交时报错： 2022-05-28 17:24:32.078 INFO 14584 --- [umer_numb-0-C-1] o.a.k.c.c.internals.AbstractCoordinator : [Consumer clientId=consumer-consumer_numb-1, groupId=consumer_num

kafka配置不正确，导致项目启动初期异常

SUPER5266的博客

03-31

448

session.timeout.ms是指：group coordinator检测consumer发生崩溃所需的时间。max.poll.interval.ms：默认值5分钟，表示若5分钟之内消费者没有消费完上一次poll的消息，那么consumer会主动发起离开group的请求。max.poll.interval.ms=1200000 # 默认20分钟（需大于session.timeout）session.timeout.ms=10000 # 默认10秒。

ConsumerCoordinator - [Consumer clientId=consumer-S-1, groupId=S] Discovered group coordinator xxx.xxxx.xxxx.xxxx:9092 (id: xxxxxx rack: null)

04-29

比如，如果ZooKeeper的连接配置错误，或者节点无法通信，消费者可能无法找到Group Coordinator。用户的问题现在包括两个方面：授权失败和协调器发现。需要分别处理这两个问题，但也要考虑它们之间的关联。比如，...

【kafka】Group coordinator xx is unavailable or invalid, will attempt rediscovery

九师兄

12-23

1万+

kafka报错，但是这个环境，从监控上看一切正常。9092端口正常，zk正常，服务正常，查看topic正常，但是控制台消费异常。代码消费异常。kafka 相应的hostname 和ip 对应关系没有配置Kafka 消息无法接收(group coordinator is not available)

15:59:28,455 INFO org.apache.kafka.clients.consumer.internals.ConsumerCoordinator [Source Data Fetcher for Source: Kafka_Source -> Process -> Sink: Print to Std. Out (2/4)#0] - [Consumer clientId=lx-1, groupId=lx] Discovered group coordinator 192.168.88.91:9092 (id: 2147483645 rack: null)

热门推荐

y368769的博客

01-14

3万+

这是一个惨痛的教训就在昨天我和我四个同事因为这个问题搞到了夜里十一点半，啊啊啊啊啊！！！太恶心了！！！在启动工程时，kafka报这个错误，在配置文件中配置kafka的依赖，和另一个服务器上配置的一模一样，但是在这个服务器上启动此工程就会出现这个问题???? 问题原因： kafka的版本有问题，在另一个服务器上使用的是2.1版本的kafka，但是在此台服务器上使用的是2.6版本的kafka，所以需要添加一项配置来解决：解决方案; 在配置文件中添加kafka配置： spring.kafka.bootstr

深度剖析Kafka中Coordinator的奥秘

todoitbo的博客

03-15

5329

本文将引领读者深入研究Apache Kafka中的Coordinator，通过实例和详细解释，揭示了在分布式消息传递中的关键作用。了解Coordinator的机制对于确保分布式系统的稳定性、协同工作以及动态管理至关重要。我们将探索Coordinator的定义、不同类型的Coordinator以及它们在Kafka中的角色和职责。

Kafka Group coordinator xxx:9092 (id: xxx rack: null) is unavailable or invalid

a805814077的博客

03-02

1万+

Kafka Group coordinator xxx:9092 (id: xxx rack: null) is unavailable or invalid 报错解决

重新discovery coordinator，然后JoinGroup + SyncGroup

大JAVA解决方案

07-17

2087

在前面我们讲过，KafkaProducer是线程安全的，同时其内部还有一个Sender，开了一个后台线程，不断从队列中取消息进行发送。而consumer，是一个纯粹的单线程程序，后面所讲的所有机制，包括coordinator，rebalance, heartbeat等，都是在这个单线程的poll函数里面完成的。也因此，在consumer的代码内部，没有锁的出现。 //客户端线程 while (true) { ConsumerRecords<String, String> ...

运行Coordinator报错

warm_day的博客

05-28

1655

错误提示:Error: E1003 : E1003: Invalid coordinator application attributes, Coordinator job with frequency [2] minutes is faster than allowed maximum of 5 minutes (oozie.service.coord.check.maximum.frequen...

聊聊kafka的group coordinator

weixin_34150830的博客

10-03

1366

序本文主要来讲一个kafka的group coordinator。在kafka0.9.0版本的时候，开始启用了新的consumer config，这个新的consumer config采用bootstrap.servers替代之前版本的zookeeper.connect，主要是要渐渐弱化zk的依赖，把zk依赖隐藏到broker背后。 g...

8、关于Coordinator

chinve2599的博客

08-30

1995

参考链接：https://www.jianshu.com/p/f01f5f0309a9 一、旧版本Scala消费者客户端的缺陷在kafka0.9及以前版本的consumer会在zookeeper上/consumers/groupId/ids、/consumers/groupId/topic...

kafka连接提示Group cordinator syh_test:9092

qq_44141082的博客

03-20

793

使用管理员权限手动在C:\Windows\System32\drivers\etc\hosts文件中添加映射。控制台这里给出的是域名地址syh_test，这个域名可能是因为解析问题或者限于远程服务器的安全策略做了转换。application.yml配置。在客户端机器上配置hosts解析。服务启动时连接kafka报错。