修改kafka broker id产生的错误

最新推荐文章于 2024-11-07 09:20:15 发布
最新推荐文章于 2024-11-07 09:20:15 发布
阅读量6k 收藏 3
点赞数 3
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/zhao4471437/article/details/52806482
本文介绍了解决Kafka启动过程中遇到的Broker ID配置与存储不一致的问题。通过检查配置文件server.properties中的log.dirs路径，并在该路径下找到meta.properties文件，最后修改其中的broker.id来解决此问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

错误：

[2016-10-13 13:49:56,746] FATAL Fatal error during KafkaServerStartable startup. Prepare to shutdown (kafka.server.KafkaServerStartable)

kafka.common.InconsistentBrokerIdException: Configured broker.id 2 doesn't match stored broker.id 0 in meta.properties. If you moved your data, make sure your configured broker.id matches. If you intend to create a new broker, you should remove all data in your data directories (log.dirs).


找到配置文件

cat server.properties

查看log.dirs所在位置

log.dirs=/home/user/tools/kafka/data

按着这个路径找到

meta.properties

修改brokerid
benjen
关注
【kafka】kafka 新增节点 报错 InconsistentBrokerIdException Configured broker.id doesn‘t match
九师兄
04-15 352
1.概述 参考博客： 根据上述博客，某网友做了docker版本的新加节点，然后，报错如下 [2021-04-14 07:26:42,890] FATAL Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.common.InconsistentBrokerIdException: Configured broker.id 7 doesn't match stored brok
Kafka系列之broker配置
worldchinalee的博客
12-07 6835
本文档的参数主要针对是kafka 0.10.0版本。 更多信息可以查看：官方文档 kafka broker 配置 对应kafka安装目录config/server.properties文件的配置 broker.id 每一个Kafka的broker都有一个整数的标识。我们设置broker.id来标识它。默认这个整数是0。这个整数必须是在一个集群中是唯一的，且必须>=0。推荐该值...
kafka启动报错： kafka.common.InconsistentBrokerIdException
RUIMENG061511332的博客
04-16 2913
kafka启动报错： FATAL Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.common.InconsistentBrokerIdException: Configured broker.id 1 doesn't match stored broker....
kafka启动异常kafka.common.InconsistentBrokerIdException
weixin_40122615的博客
10-14 2205
kafka在搭建完全分布式集群的过程中，主机把Kafka包发送到从机，修改配置文件后出现kafka进程启动失败的情况，异常的代码如下所示： [2019-10-14 11:08:51,263] INFO Client environment:java.io.tmpdir=/tmp (org.apache.zookeeper.ZooKeeper) [2019-10-14 11:08:51,263] I...
kafka节点启动后无故挂掉
qq1010234991的博客
03-08 5722
背景：kafka节点启动后，突然挂掉，重试几次后，也是如此 查看日志信息如下 Configured broker.id 0 doesn’t match stored broker.id 3 in meta.properties. If you moved your data, make sure your configured broker.id matches. If you intend ...
【kafka启动报错】
qq_35210048的博客
07-12 600
kafka 启动报错 ERROR Fatal error during KafkaServer startup. Prepare to shutdown
pykafka连接远程kafka报错，Broker {} not connected during offset manager discovery
SimpleFate的博客
07-17 1993
错误： 在通过topic获取consumer时报错，报错信息 Broker {} not connected during offset manager discovery 原因： 由于远程broker和本地pykafka客户端的的hosts文件不同，导致本地无法解析域名从而访问失败。 pykafka/cluster.py的 get_group_coordinator方法中，如果域名解析失败 br...
kafka系列之broker重点配置解析（三）
linianshigehaohaizi的专栏
08-09 4259
kafka broker 配置 对应kafka安装目录config/server.properties文件的配置broker.id 每一个Kafka的broker都有一个整数的标识。我们设置broker.id来标识它。默认这个整数是0。这个整数必须是在一个集群中是唯一的，且必须>=0。推荐该值能对应上broker所在的主机名。 port 该值是监听TCP的端口。默认是配置9092。可
CDH6.2.1 集群在线安装kafka 和 brokerid报错 以及 连接超时报错 总结
Without_1113的博客
12-28 1333
进入 cloudera manager 点击添加服 选择kafka 然后点击选择主机 本教程选择了三台机器 点击继续进入Review Changes页面 配置zookeeper的目录 配置Java Help Size of Broker (一定要大于512) 点击继续，运行完成后安装成功（如果是首次安装） 因为不是首次安装所以就出现了报错 此时我们点击角色日志 查看报错日志 通过日志可以看出是broker id不匹配的问题 这个时候我们
php rdkafka如何向kafka broker取消息?
07-14
在上面的代码中，你需要设置`group.id`为你的消费者组ID，`metadata.broker.list`为你的Kafka broker地址。 3. 订阅一个或多个主题来消费消息。例如： ```php $consumer->subscribe(['topic1', 'topic2']); ``` ...
kafka报错（一）：Configured broker.id 0 doesn‘t match stored broker.id 1 in meta.properties
桃花惜春风
09-03 6114
我们在配置kafka时可能会修改brokerid，这个时候启动可能会遇到报错 报错详细信息： [2018-09-03 07:51:10,759] ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.common.InconsistentBrokerI...
基于ngx_kafka_module插件做日志收集（git安装）
老三学加瓦
08-25 317
文章目录安装git安装kafka的c客户端安装nginx整合kafka的插件nginx配置文件重启nginx测试 安装git [root@10 nginx]# yum install -y git ... 作为依赖被安装: perl-Error.noarch 1:0.17020-2.el7 perl-Git.noarch 0:1.8.3.1-23.el7_8
Kafka踩坑记----bootstrap-server is not a recognized option如何解决
mono的博客
11-23 2万+
问题背景： 最近在做一个数据实时处理的项目，其中用到了Kafka，之前有过了解，但用起来还是不熟悉。 如题这个错误，是在做将网站日志发送到Kafka主题中时，项目使用的是Springboot集成的Kafka，当时关于Springboot中Kafka的部分已经完成，zookeeper和kafka已经正常启动，然后在查看当前Kafka中当前主题时出现错误，具体如下： 是在输入命令bin/kafka-topics.sh --bootstrap-sever hadoop102:9092 --list后出现 问题分
Kafka报错：No resolvable bootstrap urls given in bootstrap servers解决办法
热门推荐
qq_36811160的博客
10-27 4万+
1、确实是否存在要使用的主题 ./kafka-topics.sh --zookeeper node01:2181 --list 2、确认是否在Windows上配置Linux地址的映射 打开配置文件夹 C:\Windows\System32\drivers\etc 查看host文件，添加映射 192.168.150.128 node01 ...
kafka连接失败
weixin_33749242的博客
11-23 2274
kafka连接报错 问题描述 本地测试kafka推送消息，连接失败，错误如下： 原因 kafka搭建时没有配置主机名和ip的映射，默认指向主机名。 解决方式 本机配置hosts文件，ip映射目标服务的主机名 kafk /config / server.properties文件中配置host.name属性映射ip，否则默认指向主机名 ...
Kafka集群无法启动问题：broker.id需保持一致
weixin_52268321的博客
05-27 1622
问题描述： 新部署的kafka集群出现无法启动问题 命令行输入如下没有反应 bin/kafka-server-start.sh -daemon config/server.properties 解决方法 1 查看日志 cd logs/ cat kafkaServer.out 存在如下错误： FATAL Fatal error during KafkaServerStartable startup. Prepare to shutdown (kafka.server.KafkaServerStartabl
kafka broker关键参数配置
lazyguy21的专栏
10-22 466
如果要使用一套ZooKeeper环境管理多套Kafka集群，那么设置该参数的时候就必须指定ZooKeeper的chroot，比如zk1：2181，zk2：2181，zk3：2181/kafka_cluster1。结尾的/kafka_cluster1就是chroot，它是可选的配置，如果不指定则默认使用ZooKeeper的根路径。kafka里数据文件也交log，log.dirs是存放数据的目录。[[协议]]://[主机名]:[端口]] 逗号分隔可以多个。如果硬盘充足，可以多个磁盘的目录，增加写入速度。
连接kafka消息队列报org.apache.kafka.clients.NetworkClient异常
最新发布
Borny鼎鼎的博客
11-07 1039
启动kafka后，连接kafka消息队列报org.apache.kafka.clients.NetworkClient异常。检查kafka运行日志，报The broker is trying to join the wrong cluster异常。修改kafka日志目录的meta.properties文件的cluster.id值。最后再重启kafka，连接恢复正常。
记一次 springboot集成kafka-本地连接服务器的kafka，连接不上的问题
qq_39558519的博客
06-27 6343
yml中配置了bootstrap-servers:服务器地址:9092，但是连接时却报了 Connection to node -1 (localhost/127.0.0.1:9092) could not be established.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值