oracle 删除表中重复记录

最新推荐文章于 2019-02-27 21:03:05 发布

tzyhys

最新推荐文章于 2019-02-27 21:03:05 发布

阅读量86

点赞数

CC 4.0 BY-SA版权

文章标签：数据库大数据

本文链接：https://blog.youkuaiyun.com/tzyhys/article/details/84212007

本文介绍三种高效删除数据库中重复记录的方法。方法一使用DELETE语句配合子查询，但耗时较长；方法二采用ROWID结合窗口函数ROW_NUMBER，显著提高效率；方法三通过创建临时表并利用TRUNCATE及INSERT操作实现，适用于大数据量场景。

表demo是重复拷贝自dba_objects，有88万左右，不重复的是27323，没有索引
方法一：delete from demo a where a.rowid <> (select max(rowid) from demo b where
b.object_id=a.object_id);
耗时：几个小时以上
方法二： delete from demo where rowid in
(select rid from
(select rowid rid,row_number() over(partition by object_id order by rowid) rn
from demo)
where rn <> 1 );
耗时：30秒

方法三： create table demo2 as
select object_id,owner... from
(select demo.*,row_number() over(partition by object_id order by rowid) rn from demo)
where rn = 1;
truncate table demo; insert into demo select * from demo2; drop table demo2;
共耗时： 10秒，适合大数据量的情况，产生更少回滚量；