MySQL 删除数据库中字段重复的数据

最新推荐文章于 2025-09-26 15:12:05 发布

原创最新推荐文章于 2025-09-26 15:12:05 发布 · 304 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#mysql #数据库 #sql

sql 同时被 3 个专栏收录

4 篇文章

订阅专栏

去重

2 篇文章

订阅专栏

Java

2 篇文章

订阅专栏

本文介绍两种从数据库中删除重复记录的方法：使用distinct关键字和row_number()窗口函数。通过这两种方法可以有效地保留唯一记录并删除多余的重复项。

需求：数据库中存在名称重复的数据，删除重复的只保留一条。

方法1：使用distinct

DELETE FROM company_info WHERE id not in (select  a.id from (SELECT *, count(DISTINCT company_name) FROM `company_info` GROUP BY company_name) a );

方法2: 使用row_number over

DELETE FROM company_info WHERE id in (
      SELECT id from (
        SELECT *, row_number() over (partition by company_name) as rn from company_info) a  
      where a.rn > 1)

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Im_LSY

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

mysql删除表中某一字段重复的记录

09-14

一般大家也许会碰到这个问题，大家可以参考下，讲的比较详细

删除mysql数据库中的重复数据记录

12-15

在数据库管理中，确保数据的唯一性和...在大数据环境中，合理地处理和删除重复数据对于维护数据库的健康状态和提高查询效率至关重要。因此，理解并掌握这些方法对于任何从事数据库管理的IT专业人员来说都是必要的技能。

参与评论您还未登录，请先登录后发表或查看评论

怎么用mysql删除某个字段重复的数据

羊驼可以吃吗的博客

10-12

1023

怎么用mysql删除某个字段重复的数据 delete from tablename where id not in (select id from (select min(id) as id from tablename group by key) as b); delete from exam where age in (select age from (select min(age)as ag...

MySQL删除字段重复数据

qq_47729488的博客

02-21

633

delete from table_name where id not in( select t.minid from( select min(id) as minid from table_name group by 字段名 )t ); 当出现： Error Code: 1175. You are using safe update mode and you tried to update a table without a WHERE that uses a KEY column. To d

查询MySQL表中某个字段的重复数据及删除方法：

最新发布

weixin_70787959的博客

09-26

463

GROUP_CONCAT(id) as duplicate_ids -- id 是主键字段。-- 查询 first_name 和 last_name 组合重复的数据。-- 显示 users 表中所有重复 email 的完整记录。如果使用MySQL 8.0+，可以考虑使用方法3的窗口函数。-- 查询 users 表中 email 字段的重复数据。-- 删除重复的 email，只保留 id 最小的一条。：根据表的字符集和排序规则，查询可能是大小写敏感的。-- MySQL 8.0+ 使用窗口函数。

mysql删除某个字段重复的数据

颓废中糜烂

03-18

824

ALTER IGNORE TABLE `表名` ADD UNIQUE (`唯一索引字段名`);删除重复的数据，只保留一条。

mysql 删除字段中重复字段

我叫张大大爷的博客

01-22

331

student表中有name的重复值,删除掉name中重复值 select distinct name from student distinct的具体用法详情见: https://www.cnblogs.com/leonlee/p/6042461.html

MySQL 删除数据库中重复数据方法小结

09-10

在MySQL数据库管理中，删除重复数据是一个常见的需求，特别是在数据导入、同步或用户输入错误时。处理这种情况需要谨慎，以确保不会丢失重要信息。本文将详细介绍几种常见的删除重复数据的方法。 1. **基础方法：...

MySQL查询重复数据（删除重复数据保留id最小的一条为唯一数据）

09-09

本文主要探讨如何查询并删除MySQL中的重复数据，同时保留每个重复组中ID最小的一条记录。首先，我们需要找到表中的重复数据。假设我们有一个名为`brand`的表，其中包含品牌名称`brandName`和其他字段，而我们想要...

mysql删除多处字段重复的数据

李振伟的博客

10-24

2063

【代码】mysql删除多处字段重复的数据。

mysql删除多字段重复的数据

akalius的专栏

11-03

394

create table tmp as select min(id) as col1 from blur_article group by title; delete from blur_article where id not in (select col1 from tmp); drop table tmp; create table tmp as select min(id)...

删除数据库中重复的字段

v明亮的专栏

11-13

1146

例如： id name value 1 a pp 2 a pp 3 b iii 4 b pp 5

删除数据库中多字段重复的数据

翻过这座山，就到菩提洞了

10-12

285

SELECT id FROM tablename a WHERE (a.stu_id, a.tea_id) IN ( SELECT stu_id, tea_id FROM tablename GROUP BY stu_id, tea_id HAVING count(*) > 1 ) AND id...

MySQL中如何删除重复数据？

初学者

08-28

2836

在MySQL中删除重复数据是一个常见的需求，特别是在处理大型数据库时。删除重复数据可以通过多种方式实现，具体方法取决于你的具体需求和数据库的结构。以下是一些常见的方法。

MySQL删除重复数据-解决线上数据库存在重复数据的问题

Leighteen

09-14

538

MySQL删除重复数据-解决线上数据库存在重复数据的问题。

删除数据库重复记录

HelloWorld

04-27

815

测试表 create table test1( id int primary key auto_increment comment '主键', username varchar(20) comment '用户名', tel varchar(20) comment '手机号' ); 插入数据 insert into test1 (username,te...

MySQL查询重复字段,及删除重复记录的方法

ROVAST的专栏

03-07

980

MySQL, 数据库, 数据库, 字段, 服务器 数据库中有个大表，需要查找其中的名字有重复的记录id，以便比较。如果仅仅是查找数据库中name不重复的字段，很容易: SELECT min(`id`),`name` FROM `table` GROUP BY `name`; 但是这样并不能得到说有重复字段的id值。（只得到了最小的一个id值）查询哪些字段是重复的也容易: SELECT

如何删除字段表里相同重复的数据

m0_59858141的博客

05-19

587

有两个意义上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。insert into #temp(ID,Name) values('2','测试2');insert into #temp(ID,Name) values('1','测试');insert into #temp(ID,Name) values('1','测试');发生这种重复的原因是表设计不周产生的，增加唯一索引列即可解决。--查询去重后的数据。

mysql删除字段重复数据

03-14

### MySQL 中删除表内字段值重复数据的方法 #### 使用子查询和 `DELETE` 语句 (适用于少量重复) 对于仅存在一次重复的情况，可以通过自连接的方式找到并删除多余的记录。具体操作如下： ```sql DELETE t1 FROM table_name AS t1 INNER JOIN table_name AS t2 ON t1.duplicate_column = t2.duplicate_column AND t1.id > t2.id; ``` 这条 SQL 语句会保留具有最小 ID 的那一行，并移除其他所有拥有相同 `duplicate_column` 值的行[^1]。 #### 处理大量不确定次数的重复项当面对未知数量的重复条目时，可以采用临时表的方式来处理这个问题。创建一个新的临时表存储唯一键组合后的结果集，再将其内容重新导入原表中替换旧有的数据结构: ```sql CREATE TEMPORARY TABLE temp_table SELECT MIN(id) as id, duplicate_column FROM table_name GROUP BY duplicate_column; TRUNCATE TABLE table_name ; INSERT INTO table_name (id,duplicate_column) SELECT * FROM temp_table ; DROP TEMPORARY TABLE IF EXISTS temp_table; ``` 这种方法能够有效地清理掉所有的冗余副本，只留下每组重复中最先出现的那一份记录. #### 应用窗口函数（MySQL 8.0 及更高版本）如果使用的 MySQL 版本支持窗口函数，则可利用此特性简化去除重复的过程。通过分配唯一的编号给每一组内的成员来识别哪些应该被清除： ```sql WITH CTE AS ( SELECT *, ROW_NUMBER() OVER(PARTITION BY duplicate_column ORDER BY id ASC) row_num FROM table_name ) DELETE FROM table_name WHERE id IN( SELECT id FROM CTE WHERE row_num > 1 ); ``` 上述命令会在保持原始顺序的前提下消除除了第一次遇见之外的所有匹配实例. 为了确保安全性和准确性，在执行任何更改之前建议备份整个数据库或至少涉及修改的目标表格。此外，测试环境下的验证也是必不可少的一个环节。