- 博客(7)
- 收藏
- 关注
原创 resourcemanager ha发生切换时flink任务会全部失败
在YARN ResourceManager(RM)发生HA切换后,即使RM自身成功故障转移,但Flink任务仍然全部失败,这通常是由于或导致的。以下是根本原因分析和解决方案:yarn在zookeeper中,至少保存ResourceManager 选举元数据,flink应用程序元数据,非别位于不同目录,都有默认值。
2025-05-27 16:31:37
430
原创 FLink Application基于Yarn调度是否可以完全脱离Hadoop体系运行
但实际使用中通常需要部分Hadoop组件。在部署Flink on YARN时,虽然YARN本身可独立运行,但。:用于检查点和作业JAR存储。:如S3/OSS(成本更低)YARN作为资源管理器,
2025-05-27 16:19:27
447
原创 flink standalone模式不能上传jar包
本方案针对单节点(192.168.100.106)部署,确保可通过Web UI上传并执行JAR任务。此配置已确保Web上传功能可用,如需更高安全性,可配置HTTPS和用户认证。
2025-04-25 17:05:52
313
原创 基于Yarn Application的Flink HA任务,无法认证zookeeper sasl机制
在flink配置文件添加:zookeeper.sasl.disable: true。
2025-01-15 17:08:12
714
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人