kafka-踩坑

最新推荐文章于 2023-03-24 11:23:11 发布

原创最新推荐文章于 2023-03-24 11:23:11 发布 · 510 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#卡夫卡 #kafka

编程错误专栏收录该内容

42 篇文章

订阅专栏

博客主要介绍了在阿里云服务器上搭建独立Kafka环境时遇到的问题，如通过程序访问需在kafka server.properties中设置内容；还提到命令生产和消费时，创建生产者设置的IP必须与kafka配置文件中的一致，否则会报错。

欢迎大家关注我的公众号，有问题可以及时和我交流。

1 环境搭建

我是学习，只在阿里云服务器上搭建了一个独立的kafka，在搭建环境的时候遇到的一些坑如下：

kafka server.properties 配置文件中的：listeners=PLAINTEXT://IP:9092
这里我尝试了 IP设置成外网和localhost，就是通过IP访问阿里云的外网IP，然后运行结果会报错，起不来kafka。

查阅资料说的是设置成本机的IP， 使用ifconfig查看阿里云的IP，然后设置完成之后即可重新启动。

如果需要通过程序进行访问的，仅仅设置这两个还是不够的，还需要在kafka server.properties中设置如下内容。

host.name=阿里云内网IP
advertised.host.name=阿里云外网IP

advertised.listeners=PLAINTEXT://阿里云外网IP:9092

2 命令生产和消费

创建topic：./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
创建生产者：./kafka-console-producer.sh --broker-list IP（kafka设置的IP）:9092 --topic test
创建消费者：./kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning

这里有一个坑就是创建生产者的时候所设置的IP，也必须是kafka配置文件中设置的IP，否则报错：

[2019-07-09 13:11:05,594] WARN [Producer clientId=console-producer] Connection to node -1 could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient)

欢迎大家关注我的公众号，有问题可以及时和我交流。