
Flink
文章平均质量分 83
枪枪枪
见贤思齐焉,见不贤而内自省也。
君子生非异也,善假于物也。
君子博学而日参省乎己,则知明而行无过矣。
展开
-
Flink Checkpoint 中的通用增量Checkpoint
通用增量Checkpoint原创 2023-02-16 23:38:41 · 616 阅读 · 0 评论 -
Flink Checkpoint 中的Aligned Checkpoint 和 Unaligned Checkpoint
Aligned Checkpoint 和 Unaligned Checkpoint原创 2023-02-15 22:47:53 · 1009 阅读 · 0 评论 -
Flink CDC 原理
通过数据库本身的触发器(Trigger)或者日志(例如Binary log、Transaction log、Write-ahead log等)媒介将数据变化记录下来,外部系统通过数据库底层的协议,订阅并消费这些事件,然后对数据库变动记录做重放,从而实现数据同步。用户通常会在数据原表中的某个字段中,保存上次更新的时间戳或版本号等信息,然后下游通过不断的查询和上次的记录做对比,来确定数据是否有变动,是否需要同步变化数据。目前CDC有两种实现方式,一种是主动查询、一种是事件接收。随后再更新(ง •_•)ง。原创 2023-01-19 22:04:32 · 2370 阅读 · 0 评论