本文是本系列教程的第四部分:Pipeline的YAML文件编写。
前言
在第三部分——Flink CDC环境的部署的结尾已经提到了需要把代表任务的YAML文件作为参数提交到Flink环境中,本文我们则重点介绍Pipeline的YAML文件的详情。
编写一个YAML文件
以下为Mysql整库同步到Doris的YAML文件,主要包含三个部分:
- source
用于指定数据从哪里来
- sink
用于指定数据到哪里去
- pipeline
用于任务的名称和并行度,在Flink任务管理页面可以看到对应的任务名称
source:
type: mysql # 定义数据源的数据库类型
hostname: localhost # 数据库连接地址
port: 3306 # 数据库端口号

最低0.47元/天 解锁文章
394

被折叠的 条评论
为什么被折叠?



