Flink部署报错 6123端口起不来

最新推荐文章于 2025-01-24 09:31:08 发布
最新推荐文章于 2025-01-24 09:31:08 发布
阅读量3.5k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 数据仓库技术体系
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/chenshijie2011/article/details/115870599
在启动Flink集群时遇到连接拒绝错误，具体表现为尝试连接到localhost的6123端口失败。解决方法是在Flink的配置文件flink-conf.yaml中添加taskmanager.host配置，设置为localhost。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

问题描述：
启动集群之后，报错为：
org.apache.flink.runtime.net.ConnectionUtils - Failed to connect from address ‘/127.0.0.1’: Connection refused
org.apache.flink.runtime.net.ConnectionUtils - Trying to connect to address localhost/127.0.0.1:6123
解决方案：
在$FLINK_HOME/conf 下flink-conf.yaml中添加如下配置:
#添加如下配置，指定taskmananger的地址，如果是单机部署，指定localhost
taskmanager.host: localhost

【Flink】Flink Association with remote system akka Connection refused
九师兄
09-06 2481
1.背景 出现这个问题的背景请参考：【Kafka】Failed to send data to Kafka: Expiring 30 record(s) for xxx 732453 ms has passed since last [2020-09-05 11:22:51] [WARN] [akka.remote.ReliableDeliverySupervisor:120] Association with remote system [akka.tcp://flink@xxxx:44619] ha.
【Flink】Flink启动报错 BindException: Could not start rest endpoint on any port in port range 7089
九师兄
07-01 1993
1.背景 Flink界面启动报错如下 2020-05-15 13:27:47,001 INFO org.apache.flink.client.cli.CliFrontend - -------------------------------------------------------------------------------- 2020-05-15 13:27:47,007 INFO org.apache.flink.configuration..
Flink部署后启动不成功错误
Mr.Cao
03-04 6681
案例：Flink1.9 启动Flink 查看jps发现没有启动 Master Slave 如果启动成功 Master应该有StandaloneSessionClusterEntrypoint Slave应该有TaskManagerRunner 查看启动日志 异常日志 org.apache.flink.core.fs.UnsupportedFileS...
解决Flink中报 java.net.ConnectException：拒绝连接 在java.net.PlainSocketImpl.socketConnect
知其然，知其所以然
06-03 7932
一.报错如下 这种报错的原因是，你写的代码连接不到你指定的Flink集群 可以看下，报错的日志 二.解决办法 我这里只是测试wordcount，做个Demo 因此在WebUI提交jar包时，先启动nc -lk 端口,然后就可以解决这个报错了。 三.测试成功 1.先在linux下启动，nc -lk 666 [root@bigdata115 flink-1.7.2]# nc -lk 666 hello flink hello jackson hello jack 2.在提交jar包 查看发送
Flink中ClusterClient连接jobmanager获取job状态的报错
weixin_41843527的博客
04-27 966
分析该代码第一感觉是重试次数超过限制之后报的错，分析是哪里设置了重试次数了呢，然后就复制该段代码在flink源码中进行搜索，发现是在这里报的错，是FutureUtils.retryOperationWithDelay方法中会打印出来的日志。重试次数默认是20次，重试的间隔默认是3秒钟，因此clusterClient和jobmanager通信的默认超时时间为 20 X 3 为 60秒钟。再网上进行上层代码的查询是RestClusterClient.retry进行调用。
k8s的endpoints显示为空的原因分析
weixin_43146377的博客
02-26 6152
解决k8s配置的service中的endpoints为空。
flink-基础
qq_39300291的博客
03-18 783
flink中的状态分为两种: 分组的 (调用完keyBy) Keyed State: ValueState MapState ListState 未分组的 (没有调用keyBy) Operator State: ListState BroadcastState Flink实现数据一致性的原理: 开启Checkpointing,将状态保存到StateBackend中 job设置重启策略 Source支持记录偏移量(可以重放数据) Sink支持覆盖(幂等性) ...
Flink部署及集群(高可用)
qq_27960935的博客
09-25 1986
文章目录Flink部署1、下载2、解压3、启动Flink3、开放端口80814、访问ui界面5、测试6、ui界面信息Flink集群配置1、资源分配：2、配置flink-conf.yaml文件3、配置masters文件4、配置slaves文件5、开放8899端口6、启动测试Flink实现JobManager High Availability (HA)修改配置文件启动 flink测试高可用是否生效问题集1、启动Flink报错： Flink部署 1、下载 官网下载地址：http://flink.apache.o
Flink 单机部署
RodJohnsonDoctor的专栏
08-24 533
在 Linux 系统上部署 Apache Flink 1.13.2，以及掌握Flink单机生产环境的稳定运行技术点
Flinksql sink oracle不能处理jdbc url怎么解决？
最新发布
**My Coding Family**
01-24 838
🏆本文收录于专栏，主要记录项目实战过程中所遇到的Bug或因后果及提供真实有效的解决方案，希望能够助你一臂之力，帮你早日登顶实现财富自由🚀；同时，欢迎大家！持续更新中，up！up！up！！
Flink教程(1)-集群安装与部署
热门推荐
鸟哥哥的专栏
11-01 1万+
Flink教程。Flink集群安装部署。Flink 是一个同时具备流数据处理和批数据处理的分布式计算框架。Flink代码主要是由 Java 实现，部分代码由 Scala实现。Flink既可以处理有界的批量数据集、也可以处理无界的实时数据集。就业界的使用情况而言，Flink处理的主要场景是流式数据。Flink不同于Spark、Hadoop， Flink称得上是一款真正的流、批统一的大数据计算框架。
Flink：处理远程系统失败的可靠传输监督员
ByteHackerX的博客
08-31 284
在 Flink 中，Akka 是用于实现分布式通信和远程调用的框架。然而，有时候在与远程系统建立连接时会出现问题，其中一种常见的问题是与远程系统的关联失败。然而，有时候在与远程系统建立连接时会出现问题，其中一种常见的问题是与远程系统的关联失败。综上所述，当发生与远程系统的关联失败时，我们可以通过重新配置 Flink 和 Akka 的参数，以及使用断路器等机制来处理这种情况。综上所述，当发生与远程系统的关联失败时，我们可以通过重新配置 Flink 和 Akka 的参数，以及使用断路器等机制来处理这种情况。
Flink防火墙开启状态下的端口问题
qq_31866793的博客
12-14 2002
1，简单记录一下，开启防火墙的情况下，Flink执行任务报错，看日志就是端口timeout ,实际也是关闭防火墙的情况下，集群可以正常运行。 2，查询官方之后，跟查询源码后，开放端口 在flink-conf.yaml： taskmanager.rpc.port: 50100-50200 metrics.internal.query-service.port: 50201-50300 blob.server.port: 50301-50400 还有默认的端口 8081 6123等端口 ...
FlinkSQL报错：org.apache.flink.util.FlinkException: Could not upload job files.
yuchendejiyi的博客
03-31 7170
1、首先我使用的Flink版本 Flink1.12.0 2、出现错误场景 在进行Flink和Hive（3.1.2）版本进行集成，通过sql-client.sh embedded来执行（select * from emp）语句时出现此错误信息 ---> 报错信息 ---> 分析 org.apache.flink.util.FlinkException: Could not upload job files 这个错误较为笼统，根据这个定位会很模糊，值得注意的是下面的报错： 20
Flink启动StandaloneSessionClusterEntrypoint失败
weixin_46144832的博客
10-14 7914
2.权限问题：/opt/module/flink-1.12.0/bin/flink-daemon.sh:行140: /tmp/flink-atguigu-standalonesession.pid: 权限不够，这时我们要修改bin/config.sh 文件，自定义目录修改tmp临时文件位置,我这里是这样DEFAULT_ENV_PID_DIR="/opt/module/flink-1.12.0/tmp"
Flink源码分析（一）RPC通信和JobManager启动
weixin_37172178的博客
10-02 419
Flink使用Akka+Netty框架实现RPC通信，之前在spark框架源码剖析过程中已经对Akka实现RPC通信过程有所介绍，这里不做过多描述。是管理Actor生命周期的组件，Actor是负责进行通信的组件。每一个Actor都有一个MailBox，别的Actor发送给它的消息都首先存储在MailBox中，通过这种方式可以实现异步通信。每个Actor都是单线程的处理方式，不断地从MailBox中拉取消息进行执行处理，所以对于Actor的消息，不适合调用会阻塞的处理方法。
解决端口号被占用问题
RyanJJ_的博客
08-09 3860
解决端口号被占用问题
Association with remote system [akka.tcp://flink@:42567] has failed,address is now gated for [50] ms
zhengzaifeidelushang的博客
11-16 6527
Flink-1.11.2 Standalone HA集群实现JobManager高可用主备切换报错 一、问题： bigdata1节点、bigdata2节点实现JobManager的高可用主备切换，bigdata1被选为Leader，但bigdata2无法和bigdata1通信，bigdata2无法成为备用JobManager。 完成报错如下： WARN akka.remote.ReliableDeliverySupervisor [] - Association with remote system [a
Flink 配置文件说明
L, there!
01-03 3135
master 集群的 master 节点 slaves 集群中所有的工作节点 flink-conf.yaml 1. 基础配置 # JobMaster节点IP地址 jobmanager.rpc.address # JobMaster端口号，默认6123 jobmanager.rpc.port：6123 # JM 节点可分配的最大内存，master 主要管理集群资源...
华为云flink任务报错Unsupported or unrecognized SSL message
12-10
华为云Flink任务中出现"Unsupported or unrecognized SSL message"这个错误通常是由于在尝试通过SSL/TLS安全套接字层进行通信时，客户端和服务器之间使用的SSL协议版本不兼容或者是证书格式不匹配导致的。这可能发生在以下几个方面： 1. **SSL版本冲突**：可能是Flink运行环境或目标服务端的SSL版本过旧，不支持客户端发送的请求格式。 2. **证书验证问题**：Flink任务尝试连接的目标服务器提供的证书可能未被信任，或者Flink的配置文件中没有包含正确的CA证书来验证该服务器。 3. **依赖更新**：如果Flink任务依赖的库或框架对SSL有新的要求，而旧版本的任务可能不满足这些新要求。 4. **网络防火墙设置**：某些企业环境中，可能存在防火墙规则阻止了SSL通信。 解决此类问题的一般步骤包括： - 检查Flink和目标服务的SSL版本是否兼容。 - 确保Flink任务中包含了正确的SSL配置，如信任store或认证信息。 - 更新依赖的库到最新版，确保它们能处理当前的SSL协议。 - 验证网络环境，确保SSL通信没有被防火墙或其他安全软件阻断。 如果问题依然存在，建议查阅详细的日志信息，因为错误消息通常会提供更具体的线索。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

科学的N次方

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值