kafka 配置内网和外网同时可以连接

最新推荐文章于 2025-03-31 17:32:00 发布
原创 最新推荐文章于 2025-03-31 17:32:00 发布 · 4.7k 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#kafka

博客提到有时需要外网生产和消耗数据，此时需配置Kafka，使其同时支持内网和外网访问。

有时候想要外网生产，外网消耗，这个时候就想要配置kafka同时支持内网和外网同时可以访问：

#内网监听名称，这个注释想要解开
inter.broker.listener.name=INTERNAL
#内网监听规则，第一个是内网，第二个是外网，注意端口不一样，同时想要服务器入网打开9092和9094端口，端口可以自己定义
listeners=INTERNAL://172.17.1.0:9092,EXTERNAL://172.17.1.0:9094
#活动监听规则，或者说开放的规则，第一个是内网，第二个是外网，99.99.99.99这个是外网ip，根据自己情况修改
advertised.listeners=INTERNAL://172.17.1.0:9092,EXTERNAL://99.99.99.99:9094
#监听安全协议映射，直接翻译了，英文不好，这个很关键，可以解释上面所有的配置，这个映射内在就是对外打开的监听和内网的对应关系，可以看出最终走的还是内网监听
listener.security.protocol.map=INTERNAL:PLAINTEXT,EXTERNAL:PLAINTEXT
kafka-3-kafka应用的核心要点和内外网访问
qq_20466211的博客
02-18 2088
kafka应用的核心要点和内外网访问
kafka内外网连接问题
story-xu的博客
03-01 3366
部署kafka之后，发现只能被内网访问，或者配置外网之后，影响内网访问，本文介绍两种方式解决这个内外网同时访问的问题。
kafka内网网同时访问配置
carcoon的专栏
02-19 2488
有3台kafka集群broker，以下ip地址均属杜撰，仅仅做举例用 hostname 内网ip 外网Ip kafka1 192.168.1.201 139.28.39.101 kafka2 192.168.1.202 139.28.39.102 kafka3 192.168.1.203 139.28.39.103 方法1 配置hosts方式 本来kafka集群配置的listener参数如下: # The address the socket server listens on.
docker部署kafka，外网可访问
he3more的博客
03-06 7879
1.拉取镜像 拉取zookeeper镜像 docker pull wurstmeister/zookeeper 拉取kafka镜像 docker pull wurstmeister/kafka 2. 启动容器 启动zookeeper docker run -d --name zookeeper -p 2181 :2181 -t wurstmeister/zookeeper 启动k...
kafka kraft 生产环境搭建
qq_37746897的博客
06-09 1913
kafka kraft 生产环境搭建。
Kafka——内外网访问的设置
我的博客
04-19 8008
外网访问kafka
单节点kafka配置内外网同时访问
fire_in_java的专栏
08-26 1405
今天有个项目网络分内外网，部署需要在内网部署数据库、kafka等内容，外网需要部署应用，突然发现在外网应用无法连接上kafka，但是内外网端口映射是通的，于是上网google了一下，由于我们内网映射到外网时内网服务器ip发生变化，发现需要修改如下配置即可实现内外网同时访问，我使用的kafka版本为kafka_2.11-2.0.0，使用的是单节点，配置如下： #内网监听名称，这个在配置文件中没有需要添加 inter.broker.listener.name=INTERNAL #内网监听规则，第一个是内网，第二
Kafka配置内外网分流
qq_54738879的博客
07-24 853
之前服务器一直有两块网卡，一块千兆网卡，一块万兆网卡。由于之前数据量不算大，所以直接使用了千兆网卡，并配置了外网映射。随着数据量增大，kafka集群内部通信时网络带宽一直居高不下，甚至将千兆网跑满，导致数据积压。这时候不得不配置内外网分流，将内网通信流量全部走万兆网卡，千兆网卡对外提供服务。：配置kafka认证协议，我们是用的SASL_PLAINTEXT。：kafka默认使用的监听地址，表示默认使用内网监听地址通信。连接kafka，由于kafka需要公网请求访问，所以。：配置内网和外网监听地址；
实现 kafka 集群跨内外网访问
wy
07-20 2219
设置 Kafka 集群的内外网访问设置 # Listeners 是 Broker 监听的网卡IP # Kafka 的配置文件 server.properties 记录了 Zookeeper 集群各节点的访问地址 # 但是并未设置 *Broker 地址。Kafka 节点启动后向 Zookeeper 注册自己的同时也会从其中获取兄弟节点的地址实现节点间通信 # 同样，客户端连接 Kafka 后返回给它的是集群各节点的访问地址，该地址也是从上面的 Zookeeper 中获得的 # 这个地址就是 Kafka 节点
kafka集群如何内外网均可访问
热门推荐
ccccccccc
12-27 1万+
有3台kafka集群broker，以下ip地址均属杜撰，仅仅做举例用 hostname 内网ip 外网Ip kafka1 10.0.0.1 139.0.0.1 kafka2 10.0.0.2 139.0.0.2 kafka3 10.0.0.3 139.0.0.3 本来kafka集群配置的listener参数如下: # The address the socket ser...
Kafka如何配置内外网多ip访问
m0_66705151的博客
03-21 8455
Kafka如何配置内外网多ip访问
kafka1.0配置内外网访问
cocoaxian的博客
04-02 394
1、修改hosts vi /etc/hosts ## 添加内网地址映射到主机名 172.16.10.11 VM_11_11_centos VM_11_11_centos 2、修改kafka下config目录里的server.properties vi ./server.properties ############################# Socket Server Settings ############################# # The address the s
kafka支持内外网访问
weixin_47139540的博客
01-24 1240
本次搭建单机版Kafka与Kafka集群，每台机器中有内网+外网单机版Kafka服务地址：192.168.1.52:9093，外网地址：2.186.2.86:9092zookeeper服务地址：192.168.1.52:2181，外网地址：2.186.2.86:2181集群版Kafka服务地址：192.168.1.52:9093，外网地址：2.186.2.86:9092Kafka服务地址：192.168.1.539093，外网地址：2.186.2.87:9092。
Kafka配置内外网访问（解决kafka外网访问broker超时）
从云原生运维转网络安全。
03-31 1373
再次重启zookeeper和kafka应用，此时可在内网通过9093端口访问，可从外网通过9092端口访问。【kafka 2.x版本配置SASL认证】（我还没写好）
kafka安装配置(包含内外网设置)
完颜振江
04-18 1885
kafka安装配置(包含内外网设置)
kafka学习之支持内外网访问
tuguai7887的博客
11-26 6946
需求描述： 在内网搭建了kafka单机服务，可以正常使用，但之后又需要将该服务共享给外网，使内外网都可以使用同一个服务。 解决方案： 更改kafka-server的配置文件即可 具体步骤： 1、我是在centos上搭建了kafka服务，进入安装目录cd /usr/local/kafka，打开配置文件vim ./config/server.properties,如下图所示： ...
Kafka公网访问
real向往的博客
01-08 3632
Kafka内外网访问
Kafka以允许外网访问
PLUTOprivate的博客
04-07 1891
配置项被设置为Kafka将向客户端宣告的可访问的地址和端口。例如，如果Kafka部署在一个云服务上，并且该服务有一个公共IP，则应设置为。如果使用了Kafka集群，确保所有的broker节点的配置都进行了相应的修改。要配置Kafka以允许外网访问，您需要修改Kafka的配置文件。修改Kafka的防火墙规则，以允许外部访问9092端口。这样Kafka就会在所有网络接口上监听9092端口。####如有侵权请联系删除####重启Kafka服务以使配置生效。
docker部署kafka&外网访问通过python
仅进行技术交流，不代写代码及其他
05-17 1248
项目开发需要使用kafka作为消息中间件，并使用python开发消费者端接收消息，参考：https://zhuanlan.zhihu.com/p/279784873，这里记录下整个配置流程，并可以外网访问。zookeeper_ip 是 容器zookeeper 的ip地址，可用通过查看docker的network确定ip，根据name找到zookeeper 的ip地址。在不同终端里先启动消费者，然后启动生产者。bridge的network id。查看一下kafka版本。
如何配置kafka 同时支持127 和 外网访问
最新发布
06-06
<think>嗯，用户现在想配置Kafka同时支持本地127.0.0.1和外网访问。这是个很实用的场景需求。在之前的引用资料中，我可以看到用户可能遇到监听地址配置问题，包括指定IP、0.0.0.0的含义，以及内外网映射的设置问题。用户在引用里提到了listeners配置很关键。比如引用1解释了多IP监听的机制，0.0.0.0监听所有网卡，127.0.0.1仅本地可用。引用2展示了如何通过advertised.listeners处理内外网映射的例子。用户需要同时支持127.0.0.1和外网访问，这需要给不同监听器做分流方案。用户可能是在混合环境下使用Kafka，既有本地应用，也有远程客户端，因此需要不同访问方式的配置方案。用户上次问题提到过外网访问需求，这次明确要同时支持127.0.0.1。需要考虑安全因素。引用3提到过配置内网地址时可用ifconfig获取真实地址。方案的核心应是分离监听器，让监听127.0.0.1仅限本地访问，单独监听0.0.0.0端口用于外网接入，同时配套设置advertised.listeners进行内外网地址转换。需要确保安全协议设置正确，避免配置错误导致的访问或端口占用问题。用户还提到引用5的主机名解析问题，配置时需要让主机名能被解析，最好在配置中直接使用IP地址形式来规避域名解析风险。引用4的覆盖参数配置技巧可能对用户测试时有用。综合这些，分步配置方案需包含详细示例，特别是advertised.listeners的映射方式，避免用户混淆。用户可能是运维或开发人员，需要实操性强的指导，所以每个配置项都需要清晰说明用途。</think> 要配置Kafka同时支持本地`127.0.0.1`和外网访问，需通过分离监听器（`listeners`）和广播地址（`advertised.listeners`）实现。以下是完整步骤： --- ### 一、解决方案核心配置 在`server.properties`中修改以下参数： ```properties # 同时监听本地环回地址和外网IP listeners=INTERNAL://127.0.0.1:9092, EXTERNAL://0.0.0.0:9093 # 指定客户端使用的实际地址 advertised.listeners=INTERNAL://127.0.0.1:9092, EXTERNAL://外网IP或域名:9093 # 定义监听器安全协议 listener.security.protocol.map=INTERNAL:PLAINTEXT, EXTERNAL:PLAINTEXT # 指定Broker间通信的监听器 inter.broker.listener.name=INTERNAL ``` > **注**： > 1. `外网IP`需替换为服务器的公网IP（如`180.77.248.246`）或域名 > 2. `9092`和`9093`为示例端口，需确保防火墙开放对应端口 --- ### 二、关键配置详解 1. **`listeners`** - `INTERNAL://127.0.0.1:9092` → **仅限本机应用**通过`localhost:9092`访问 - `EXTERNAL://0.0.0.0:9093` → **开放所有网卡**，允许外网通过`公网IP:9093`访问 2. **`advertised.listeners`** - 客户端连接时使用的地址，需与实际访问路径一致 - 外网地址**必须**是可被客户端解析的IP/域名[^2][^3] --- ### 三、完整配置示例（云服务器场景） ```properties # server.properties 关键配置 listeners=INTERNAL://127.0.0.1:9092, EXTERNAL://0.0.0.0:9093 advertised.listeners=INTERNAL://127.0.0.1:9092, EXTERNAL://203.0.113.25:9093 listener.security.protocol.map=INTERNAL:PLAINTEXT, EXTERNAL:PLAINTEXT inter.broker.listener.name=INTERNAL # 必要基础配置 broker.id=1 zookeeper.connect=127.0.0.1:2181 log.dirs=/tmp/kafka-logs ``` --- ### 四、验证步骤 1. **本地生产者测试** ```bash bin/kafka-console-producer.sh --bootstrap-server 127.0.0.1:9092 --topic test ``` 2. **外网消费者测试** ```bash bin/kafka-console-consumer.sh --bootstrap-server 203.0.113.25:9093 --topic test ``` > 若外网无法连接，检查： > - 防火墙是否放行`9093`端口 > - 云服务商安全组规则（如阿里云/腾讯云控制台） > - `advertised.listeners`外网IP是否与服务器真实IP一致[^2][^5] --- ### 五、特殊场景处理 **云服务器无公网IP绑定网卡时**（如阿里云经典网络）： 将`advertised.listeners`中的外网地址改为**内网IP**，并在云控制台配置端口转发： ```properties advertised.listeners=EXTERNAL://内网IP:9093 # 如10.20.1.153:9093 ``` ---
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

yijiliangfang

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值