【Flink数据增量数据同步不过来】

最新推荐文章于 2025-07-05 12:06:50 发布

home_haobinjie

最新推荐文章于 2025-07-05 12:06:50 发布

阅读量739

点赞数

CC 4.0 BY-SA版权

文章标签： flink 数据库大数据

本文链接：https://blog.youkuaiyun.com/home_haobinjie/article/details/131207029

文章讨论了使用FlinkCDC进行数据同步时遇到的问题，具体表现为全量数据和增量UPDATE能正常同步，但增量INSERT在涉及联表操作时失败。问题出现在当在同一事务中对tableA新增数据并更新tableB时，同步无法正确处理。单独执行每个操作则可成功，表明问题可能与联表操作的事务处理有关。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

flinkCDC 同步数据问题记录，
问题描述：
sql脚本
全量数据同步没有问题
增量update 没有问题
增量insert 同步不了
问题分析：
sql 脚本是连表的 tableA tableB ，tableA新增一条数据，然后更新tableB表的字段，两个操作在一个事务里，这时候同步不了数据。去掉联表后可以同步，问题出在join tableB 表上。