Oracle存储过程迁移ODPS-01（专有云）：支持DML(delete/update/merge)SQL

最新推荐文章于 2023-11-02 15:02:48 发布

weixin_33971977

最新推荐文章于 2023-11-02 15:02:48 发布

阅读量672

点赞数

CC 4.0 BY-SA版权

文章标签：数据库

原文链接：https://yq.aliyun.com/articles/674413

本文详细介绍了如何使用ODPS SQL进行全量表与增量表的数据同步操作，包括更新、删除以及合并策略。通过具体SQL语句示例，展示了如何实现数据的高效同步与管理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

--关系型数据库支持的 delete/update/merge SQL ，在ODPS该如何写

-- 上日全量表
table1(key1 string,key2 string,col1 string,col2 string);
-- 今日增量表
table2(key1 string,key2 string,col1 string,col2 string);
-- 今日增量表（删除）
table3(key1 string,key2 string,col1 string,col2 string);

--1.update(table2 表中的记录的值，更新到table1表中)
insert overwrite table table1
select t1.key1
      ,t1.key2
      ,case when t2.key1 is not null then t2.col1 else t1.col1 end as col1
      ,case when t2.key1 is not null then t2.col2 else t1.col2 end as col2
  from table1 t1
  left outer join table2 t2 on t1.key1=t2.key1 and t1.key2 = t2.key2
;

--2.delete(table2 表中的记录，从table1表中删除)
insert overwrite table table1
select t1.key1
      ,t1.key2
      ,t1.col1
      ,t1.col2
  from table1 t1
  left outer join table2 t2 on t1.key1=t2.key1 and t1.key2 = t2.key2
 where t2.key1 is null
;
--3.merge（没有del）
insert overwrite table table1
select 
  from(
-- 先把上日存在，今日也存在的记录从上日表中排除。剩下的就是今日没有更新的记录
select t1.key1
      ,t1.key2
      ,t1.col1
      ,t1.col2
  from table1 t1
  left outer join table2 t2 on t1.key1=t2.key1 and t1.key2 = t2.key2
 where t2.key1 is null
 union all
-- 再合并上今日增量，就是今天的全量
select t2.key1
      ,t2.key2
      ,t2.col1
      ,t2.col2
  from table2 t2)tt
;

--2.merge（有del）
insert overwrite table table1
select 
  from(
-- 先把上日存在，今日也存在的记录从上日表中排除，再把今日删除的记录排除。剩下的就是今日没有更新的记录
select t1.key1
      ,t1.key2
      ,t1.col1
      ,t1.col2
  from table1 t1
  left outer join table2 t2 on t1.key1=t2.key1 and t1.key2 = t2.key2
  left outer join table3 t3 on t1.key1=t3.key1 and t1.key2 = t3.key2
 where t2.key1 is null or t2.key1 is null
 union all
-- 再合并上今日增量，就是今天的全量
select t2.key1
      ,t2.key2
      ,t2.col1
      ,t2.col2
  from table2 t2)tt
;

-- 暮角 15901445705 update at 20181203