本文主要介绍源表为单表时,全量数据同步的情况。当源表为多表时,跟单表的情况差不多。
一、数据同步情况说明
将源数据库S中的A表(将此表称为源表),通过ETL工具同步至目标数据库T的A表(将此表称为目标表)。假设源表A的表结构与目标表A的表结构完全一致。表结构如下图所示:
二、全量数据同步过程
1、单次全量数据同步流程图,如下图所示:
1)、开始。
2)、查询源表A中所有数据记录。即在源数据库S下执行下面语句:
select * from A
3)、循环遍历每一条记录,将此记录记做SR。
4)、判断此记录SR是否存在。若SR不存在,说明源表A中无记录,结束。若SR存在,执行下一步。
5)、根据ID,查询目标表A中对应的记录,将此记录记做TR。即在目标数据库T下执行下面语句:
select