SQL语句去掉重复记录,获取重复记录

本文介绍了如何使用SQL语句在数据库中去除重复记录,包括部分字段重复和完全重复记录的处理方法,以及使用临时表提高效率的技巧。

  SQL语句去掉重复记录,获取重复记录商丘牛皮癣医院

  --查询一个表中有效去掉重复的记录,UserID为自增长主键,RoleID为重复字段

  SELECT MIN(UserID) AS UserID, RoleID FROM tmpTable GROUP BY RoleID

  SELECT RoleID FROM tmpTable GROUP BY RoleID HAVING (COUNT(*) > 1)

  SELECT DISTINCT * FROM tmpTable

  sql语句查询 sql server access 数据库里的所有表名,字段名2007年02月01日 星期四 下午 04:21SQL SERVER

  查看所有表名:

  select name from sysobjects where type='U'

  查询表的所有字段名:

  Select name from syscolumns Where ID=OBJECT_ID('表名')

  select * from information_schema.tables

  select * from information_schema.views

  select * from information_schema.columns

  ACCESS

  查看所有表名:

  select name from MSysObjects where type=1 and flags=0

  MSysObjects是系统对象,默认情况是隐藏的。通过工具、选项、视图、显示、系统对象可以使之显示出来

  重复的数据可能有这样两种情况,第一种: 表中只有某些字段一样,第二种是两行记录完全一样。

  一、对于部分字段重复数据的删除商丘银屑病医院

  1.查询重复的数据

  select 字段1,字段2, count(*) from 表名 group by 字段1,字段2 having count(*) > 1

  例:Select owner from dba_tables group by owner having count(*)>1;

  Select owner from dba_tables group by owner having count(*)=1; //查询出没有重复的数据

  2.删除重复的数据

  delete from 表名 a where 字段1,字段2 in (select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)

  这种删除执行的效率非常低,对于大数据量来说,可能会将数据库吊死。

  另一种高效率的方法是先将查询到的重复的数据插入到一个临时表中,然后再进行删除。

  CREATE TABLE 临时表 AS

  (

  select 字段1,字段2, count(*) as row_num

  from 表名

  group by 字段1,字段2

  having count(*) > 1

  );

  上面这句话就是建立了临时表,并将查询到的数据插入其中。

  下面就可以进行这样的删除操作了:

  delete from 表名 a

  where 字段1,字段2 in (select 字段1,字段2 from 临时表);

  3.保留重复数据中最新的一条记录商丘牛皮癣专科医院

  在Oracle中,rowid是隐藏字段,用来唯一标识每条记录。所以,只要保留重复数据中rowid最大的一条记录就可以了。

  查询重复数据:

  select a.rowid,a.* from 表名 a

  where a.rowid != (

  select max(b.rowid) from 表名 b

  where a.字段1 = b.字段1 and a.字段2 = b.字段2 );

  例:selete from dba_tables a

  where a.rowid!=(

  select max(rowid) from test b

  where a.owner=b.owner);

  删除重复数据,只保留最新的一条数据:

  delete from 表名 a

  where a.rowid != (

  select max(b.rowid) from 表名 b

  where a.字段1 = b.字段1 and a.字段2 = b.字段2 )

  使用临时表实现高效查询

  create table 临时表 as

  (select a.字段1, a.字段2, MAX(a.ROWID) as dataid from 正式表 a

  GROUP BY a.字段1,a.字段2);

  delete from 表名 a

  where a.rowid !=

  ( select b.dataid from 临时表 b

  where a.字段1 = b.字段1 and

  a.字段2 = b.字段2 );

  commit;

  二、对于完全重复记录的删除商丘银屑病专科医院

  对于表中两行记录完全一样的情况,可以用下面语句获取到去掉重复数据后的记录:

  select distinct * from 表名

  可以将查询的记录放到临时表中,然后再将原来的表记录删除,最后将临时表的数据导回原来的表中。如下:

  CREATE TABLE 临时表 AS (select distinct * from 表名);

  drop table 正式表;

  insert into 正式表 (select * from 临时表);

  drop table 临时表;   假如想删除一个表的重复数据,可以先建一个临时表,将去掉重复数据后的数据导入到临时表,然后在从临时表将数据导入正式表中,如下: INSERT INTO t_table_bak

  select distinct * from t_table;

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值