MySQL删除重复数据行(只保留一条)

最新推荐文章于 2023-02-21 10:58:55 发布
原创 最新推荐文章于 2023-02-21 10:58:55 发布 · 2.7k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了一种使用SQL语句删除MySQL数据库中devices_all表的重复记录的方法。通过创建包含device_id字段的表，并利用子查询找出重复项进行删除，确保数据的唯一性。

delimiter $$

CREATE TABLE devices_all ( device_all_id int(11) NOT NULL AUTO_INCREMENT,device_id varchar(512) DEFAULT NULL, device_token varchar(512) DEFAULT NULL,client_agent varchar(512) DEFAULT NULL, create_time datetime DEFAULT NULL, PRIMARY KEY (device_all_id) ) ENGINE=MyISAM AUTO_INCREMENT=49 DEFAULT CHARSET=latin1$$

表名devices_all,判重列device_id。

delete from devices_all where device_id in (select device_id from (select device_id from devices_all a group by a.device_id having count(a.device_id) > 1) as a) and device_all_id not in (select device_all_id from (select min( device_all_id) device_all_id from devices_all

[mysql] 删除重复数据，只保留一条
FightingITPanda的博客
11-20 514
需求： 业务表有脏数据了，很多重复数据，导致报错 现要将重复数据都删掉，只留一条 实现： 1、搞一张表，模拟数据 想要的结果：panda留一条、kongfu留一条 2、思路： 1、分组，将重复数据查出来 2、通过id区分，留id最小的一条 3、删除，刨除id最小的一条 3、脚本： DELETE FROM panda_test WHERE panda_name IN ( SELECT panda_name FROM ( SELECT panda_name
mysql 过滤重复数据以及删除表中的重复数据保留一条数据的方法
junjiahuang的博客
02-28 1640
从前面查询重复的数据，加上排除最小的数据，就是我们要删除的多余的重复的数据。
删除数据库中重复的数据（只保留一条）
05-27
删除数据库中重复的数据！！ 详细SQL语句....
mysql 删除重复数据只保留一条
感受微风
01-04 437
DELETE FROM 表名 WHERE ID IN ( SELECT * FROM (SELECT MAX(ID) FROM 表名 WHERE ... GROUP BY MSG HAVING COUNT(MSG) > 1) AS b); 注意事项：MSG为重复字段 ID一定要是 唯一字段 ，如果ID代表的重复字段 那么就删除了所有的数据，BE CARE 上面这句SQL：有一...
sql 删除重复数据 保留一个
genziisme的专栏
04-06 450
方法1： 1、创建一个临时表，选取需要的数据。 2、清空原表。 3、临时表数据导入到原表。 4、删除临时表。 mysql> select * from student; +----+------+ | ID | NAME | +----+------+ | 11 | aa | | 12 | aa | | 13 | bb | | 14 | bb | | 15 | bb |
MySQL 删除重复行
杨光的技术收集站
07-02 739
最近看了一些关于Mysql优化方面的东西，想整理下来。 第一个是查询优化的 1、order by 2、group by 3、limit 4、index 5、删除表中的重复行 （一）删除表中的重复行，建立复合主键 先从表中的重复行建立复合索引来说： table name prima col1 col2 col3 col4 col5 aa1 bb1 cc1 dd1 ee1  
mysql数据库删除重复的行_Mysql 删除数据表重复行
weixin_36254931的博客
01-18 428
准备示例数据以下sql创建表，并将示例数据插入到用于演示的contacts表中。CREATE TABLE contacts (id INT PRIMARY KEY AUTO_INCREMENT,first_val VARCHAR(50) DEFAULT NULL,last_val VARCHAR(50) DEFAULT NULL,email VARCHAR(255) NOT NULL);INSER...
mysql查找删除重复数据并只保留一条实例详解
10-21
本文将详细介绍如何在MySQL中查找并删除重复数据，同时只保留其中一条，具体以实例进行解析。 首先，假设我们有一个名为`test`的表格，包含以下字段：`school_id`、`school_name`、`total_student`和`test_takers`...
MySQL查询重复数据（删除重复数据保留id最小的一条为唯一数据）
09-09
本文主要探讨如何查询并删除MySQL中的重复数据，同时保留每个重复组中ID最小的一条记录。 首先，我们需要找到表中的重复数据。假设我们有一个名为`brand`的表，其中包含品牌名称`brandName`和其他字段，而我们想要...
SQL删除重复数据只保留一条
qin_yaping的博客
11-01 6677
SQL删除重复数据只保留一条 用SQL语句,删除掉重复项只保留一条 在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢 1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断 select * from people where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1) 2、删除表中多余的重复记录，重复记录是根据单个字段（peop
【mysql】mysql删除重复记录并且只保留一条
热门推荐
千千
09-03 24万+
目录 一、单个字段的操作 分组介绍： 1. 查询全部重复的数据： 2. 删除全部重复试题： 3. 查询表中多余重复试题（根据depno来判断，除了rowid最小的一个） a. 第一种方法： b. 第二种方法： c. 补充第三种方法（根据评论区给的删除总结出来的）： 4. 删除表中多余重复试题并且只留1条： a. 第一种方法： b. ☆第二种方法（与上面查询的第二种方法对应，只...
MySql 删除表中重复的数据（但要保留一条）
刘宇(LY)个人笔记
01-19 2万+
今天遇到一个问题。相同的数据在同一张表里出现了多次。我的需求是删除多余的数据，但要保留其中一条。 定义 表明 table_a ,判断唯一的两个字段 c_1,c_2，无关字段data 表中原始数据如下 首先我们要查看数据库中那些数据重复了，执行如下SQL SELECT * FROM (SELECT COUNT(*) as num,c_1,c_2 FROM table_a GROUP
如何在MySQL数据表中删除重复行
BBX__XB的博客
02-21 4514
3. 删除重复行（重复记录只保留id最小值）场景：名字和年龄都重复的数据，只保留一条记录。3. 删除重复行（重复记录只保留id最小值）场景：名字重复的数据，只保留一条记录。2. 查询name重复行，id最小值。2. 查询name重复行，id最小值。
删除重复数据，保留重复数据中的一条
pehao的博客
05-14 964
删除重复数据，保留重复数据中的一条 DELETE FROM [dbo].[Datamonitoring] WHERE ID NOT IN (SELECT MAX(ID) FROM [dbo].[Datamonitoring] GROUP BY MONITDATE HAVING COUNT(1) >= 1 )
Mysql查找删除重复行
彭世瑜的博客
04-14 1288
测试准备 -- 准备测试数据库和数据表，并写入初始数据 mysql> create database demo; mysql> use demo; mysql> create table mytable (id int not null primary key, day date not null); mysql> insert into mytable(id,...
MySQL 查找删除重复行
zhusongziye的博客
04-26 1815
如何查找重复行第一步是定义什么样的行才是重复行。多数情况下很简单：它们某一列具有相同的值。本文采用这一定义，或许你对“重复”的定义比这复杂，你需要对sql做些修改。本文要用到的数据样本：create table test(id int not null primary key, day date not null);   insert into test(id, day) values(1, '2...
删除重复数据，留一条
成成的专栏
10-16 238
--删除重复sl_inbox delete a from sl_inbox a where exists(select 1 from MMV_DB_SLCHONGFU b where b.box=a.box and b.ofspstate=a.ofspstate and b.id>a.id) ...
mysql删除表中重复的行
m0_56184347的博客
04-29 4160
1首先创建一个表，来进行演示。如图先创建表 2然后切换到命令行查看数据库中的表内容，确实有重复的项。 3首先先查询出重复的行 4现在希望删除的是出现在这张表中的数据，只保留每一组中id最大的那一行，因此需要使用max函数查询出最大的一行，因此先查出来这些id不在最大的行 或者查询出id在这些里面的最大值 然后将不在这些不重复的里面,这些删除即可 delete from deleteDuplicate where id not in (select t.maxId from (select max(i
mysql删除重复数据，只保留一条
最新发布
05-30
<think>嗯，用户想了解如何在MySQL中删除重复数据但保留一条。我需要根据提供的引用内容来整理解决方案。首先，引用1和2提到了使用DELETE语句和LIMIT子句，以及可能使用临时表的方法。同时，引用3提到删除时可能涉及死锁问题，需要注意。用户的问题可能涉及两种情况：有唯一主键和没有主键的情况。对于有主键的情况，可以通过子查询找到需要保留的最小或最大ID，然后删除其他重复行。例如，使用DELETEJOIN语句，关联同一表中重复的行，并删除ID较大的那些。这种方法需要确保每行有一个唯一标识，比如自增ID。 如果没有主键，可能需要创建临时表。步骤包括：创建临时表存储去重后的数据，清空原表，重新插入数据，最后删除临时表。这种方法适用于没有唯一标识的情况，但需要注意事务处理，避免数据丢失。另外，用户可能关心性能问题，尤其是在处理大表时。使用临时表的方法虽然有效，但可能需要更多的存储空间和IO操作。而直接使用DELETE语句可能更高效，但需要注意锁的问题，避免死锁，如引用3提到的。还需要考虑是否需要在删除后添加唯一索引，防止未来再次出现重复数据。这可能是一个后续的优化步骤，用户可能也会感兴趣。 总结一下，解决方案应包括两种方法：有主键时使用DELETEJOIN，无主键时使用临时表。同时，提醒用户注意备份和性能问题，以及如何防止重复数据的再次出现。</think>在MySQL中删除重复数据并保留一条的解决方案可分为以下两种典型场景： ### 一、有唯一标识列的场景 当表中存在自增主键或其他唯一标识列时： ```sql DELETE t1 FROM your_table t1 INNER JOIN your_table t2 WHERE t1.id > t2.id AND -- 保留id最小的记录 t1.column1 = t2.column1 AND t1.column2 = t2.column2; -- 定义重复的字段组合 ``` 此方法通过自连接查询，删除重复记录中ID较大的条目[^1][^2] ### 二、无唯一标识列的场景 使用临时表过渡方案： ```sql -- 创建临时表存储去重数据 CREATE TABLE temp_table LIKE your_table; INSERT INTO temp_table SELECT DISTINCT * FROM your_table; -- 清空原表并重新插入 TRUNCATE TABLE your_table; INSERT INTO your_table SELECT * FROM temp_table; -- 清理临时表 DROP TABLE temp_table; ``` 该方法通过$DISTINCT$关键字过滤重复数据，但需要注意事务处理（建议在事务中操作）[^1] ### 三、进阶方案（使用窗口函数） MySQL 8.0+支持ROW_NUMBER()函数： ```sql DELETE FROM your_table WHERE id IN ( SELECT id FROM ( SELECT id, ROW_NUMBER() OVER(PARTITION BY column1, column2 ORDER BY id) AS rn FROM your_table ) t WHERE rn > 1 ); ``` 此方法通过分组排序标记重复项，适合处理复杂重复规则[^2]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值