SeaTunnel 2.3.4 Cluster in K8S

原创

已于 2024-03-13 08:25:23 修改 · 1.3k 阅读

21 ·

CC 4.0 BY-SA版权

文章标签：

#kubernetes #容器 #云原生

于 2024-03-12 23:00:00 首次发布

本文详细介绍了如何在ApacheSeatunnel2.3.4的cluster-mode下在Kubernetes中部署，包括下载、配置Map、使用Reloader管理configmap、Maven设置、下载Connector、构建Docker镜像并推送。还涉及到了与MySQL的连接和镜像上传至私有仓库的过程。

参考：seatunnel k8s运行zeta引擎（cluster-mode模式）_apache seatunnel zeta 启动-优快云博客
以上参考使用的是2.3.3版本

下载2.3.4版本, 上dlcdn.apache.org下载，官网下载有问题
wget https://dlcdn.apache.org/seatunnel/2.3.4/apache-seatunnel-2.3.4-bin.tar.gz
解压

configmap配置，可考虑指定namespace
kubectl create configmap hazelcast-client --from-file= config/hazelcast-client.yaml
kubectl create configmap hazelcast --from-file=config/hazelcast.yaml
kubectl create configmap seatunnelmap --from-file=config/seatunnel.yaml

使用Reloader实现更新configmap后自动重启pod

wget https://raw.githubusercontent.com/stakater/Reloader/master/deployments/kubernetes/reloader.yaml

修改namespace

%s/default/seatunnel/g

kubectl apply -f reloader.yaml