flink on k8s 实践
Flink on k8s 环境搭建(二)_wangqiaowq的博客-优快云博客
Flink 需要考虑3个问题
1、Flink需要添加部分依赖包到flink/lib下,所以需要通过dockfile的方式自定义制作flink image
2、flink 日志持久化
3、flink checkpoint 的存储 和 NFS的安装
1)安装 nfs
1、所有节点安装 nfs
yum -y install nfs-utils rpcbind

2、在 master 节点创建共享目录并授权
mkdir /opt/nfsdata
#授权共享目录
chmod 666 /opt/nfsdata/
3、配置 exports 文件
cat > /etc/exports<<EOF
/opt/nfsdata *(rw,no_root_squash,no_all_squash,sync)
EOF
exportfs -r
systemctl start rpcbind
systemctl start nfs-server
systemctl enable rpcbind
systemctl enable nfs-server
Created symlink from /etc/systemd/system/multi-u

该文章详细介绍了如何在Kubernetes环境中搭建Flink集群,包括通过Dockerfile自定义Flink镜像、设置Flink日志持久化到NFS、配置NFS服务、实现Flinkcheckpoint存储以及利用keeplived实现高可用的虚拟IP。步骤涵盖从NFS服务器的安装、配置,到keeplived的配置和脚本编写,确保了Flink集群的稳定运行和故障切换。
最低0.47元/天 解锁文章

1053

被折叠的 条评论
为什么被折叠?



