Error while executing topic command : replication factor: 3 larger than available brokers: 0

最新推荐文章于 2023-07-11 12:02:55 发布

原创最新推荐文章于 2023-07-11 12:02:55 发布 · 5.1k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#kafka

本文解析了在Kafka集群中创建主题时遇到的“replication factor大于可用brokers”错误，通过分析日志发现是由于集群未完全启动导致。在确保集群所有节点正常运行后，主题创建成功。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

使用如下命令，使得kafka创建topic
[admin@hadoop102 kafka]$ bin/kafka-topics.sh --zookeeper hadoop102:2181 --create --replication-factor 3 --partitions 1 --topic first
报如下错误：
Error while executing topic command : replication factor: 3 larger than available brokers: 0
[2019-05-09 14:02:55,509] ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: replication factor: 3 larger than available brokers: 0
(kafka.admin.TopicCommand $) c o n f i g / 下的 s e r v e r . p r o p e r t i e s 配置正确。分析日志 a v a i l a b l e b r o k e r s : 0 - - > 可用 b r o k e r 数目为 0 ，即 k a f a 集群未开启。开启 k a f a 集群后，再次执行命令： [a d m i n @ h a d o o p 102 k a f k a]$ bin/kafka-topics.sh --zookeeper hadoop102:2181 --create --replication-factor 3 --partitions 1 --topic first
显示topic创建成功。
如果值开启集群中的一个节点，则会报：
Error while executing topic command : replication factor: 3 larger than available brokers: 1
[2019-05-09 14:15:56,822] ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: replication factor: 3 larger than available brokers: 1
分析日志可知，可用的broker数目只有一个，而需要创建的副本数为3个。故需要开启至少能够存储3个副本的节点。
在我的集群环境下，开启了三台节点后再运行创建topic命令。
结果：创建成功。