Kafka配置问题总结

最新推荐文章于 2023-08-15 13:52:24 发布

原创最新推荐文章于 2023-08-15 13:52:24 发布 · 513 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kafka

kafka 专栏收录该内容

1 篇文章

订阅专栏

在CDH5.11.0、Kafka2.2.0环境下，使用kafka-console-producer进行消息发送测试时，遇到TimeoutException错误。通过检查CM中Kafka配置，发现Broker端口设置为9096而非默认的9092，调整端口号后问题解决。提醒在使用组件时，务必确认端口号与CM中组件配置一致。

1、CDH5.11.0、Kafka 2.2.0环境

当使用/opt/cloudera/parcels/KAFKA/bin/kafka-console-producer --broker-list DD01:9092,DD02:9092,DD03:9092 --topic test测试时，报错信息如下：

ERROR Error when sending message to topic test with key: null, value: 5 bytes with error: (org.apache.kafka.clients.producer.internals.ErrorLoggingCallback)

org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.

查看cm中kafka配置发现broker tcp port为9096

应改为：/opt/cloudera/parcels/KAFKA/bin/kafka-console-producer --broker-list DD01:9096,DD02:9096,DD03:9096 --topic test