MySQL唯一索引出现重复值

已于 2023-03-17 10:49:31 修改
阅读量1.1k 收藏
点赞数
分类专栏： MySQL数据库相关讲解 文章标签： 数据库 oracle java
于 2023-03-17 10:44:34 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/WXF_Sir/article/details/129614017
版权
本文探讨了MySQL5.7.38主从架构中唯一索引出现重复值的问题，分析了由于unique_checks=0导致的不检查物理读情况。提供了临时和永久的解决方案，包括业务数据去重和保持unique_checks为1。复现步骤包括表结构创建、数据插入、重启mysqld等，同时指出联合唯一索引中null值可能导致重复。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

碰巧看到GreatSQL社群推送的这篇文章《故障案例：MySQL唯一索引有重复值，官方却说This is not a bug》，给我们介绍了MySQL数据库中唯一索引和重复值相关的一个场景，值得学习借鉴。

一、问题

MySQL5.7.38主从架构，主节点唯一索引上（唯一索引不是主键）有重复值，全部从节点报1062，SQL线程状态异常，根据SQL线程报的binlog位置点，insert数据时有重复值，插入失败

二、原因

unique_checks=0时导致，在bug(106121)列表中官方解释的原因：该参数关闭，维护唯一索引时，不会进行物理读，只会进行内存读，来确保唯一索引的唯一性，即如果内存中有冲突数据就报1062，如果内存中没有冲突数据插入成功，不会进行IO来将唯一索引相关的数据页拉取到内存。

官方的回复"IMHO this is not a bug"，我理解的意思"不要你觉得，我要我觉得，我就是这么玩的"。

<

了解本专栏 订阅专栏 解锁全文 超级会员免费看
MySql联合唯一索引含null值，索引失效
ithongchou的博客
08-14 1043
联合唯一索引在处理包含NULL值的列时可能会出现问题，主要是因为NULL被视为未知且不等于其他NULL值。了解这些行为可以帮助你更好地设计数据库架构和编写查询。
MySQL--为什么加了唯一索引还会产生重复数据
weixin_42118323的博客
03-19 471
发现 user_code 为 TC-00000001 的出现了两条数据，我们前面已经创建了 user_code、age 的唯一索引，为什么还会允许出现重复数据呢？难道是唯一索引失效了？对比上面两次 insert 操作，我们发现 user_code 为 TC-00000001 存在一条 age 为 null 的数据，我在一张表里设置了唯一索引，但是我发现还是出现了重复数据，这是什么情况呢，难道唯一索引失效了？很明显唯一索引生效了，也就是说上面的问题，并非是唯一所以失效导致的。
MySQL添加唯一索引后，还是产生重复数据
yghandsome的博客
08-31 583
MySQL添加唯一索引后，产生重复数据
mysql 唯一索引出现重复数据_mysql使用唯一索引避免插入重复数据
weixin_35600779的博客
02-07 4206
使用MySQL 索引防止一个表中的一列或者多列产生重复值一:介绍MYSQL唯一索引如果要强烈使一列或多列具有唯一性，通常使用PRIMARY KEY约束。 但是，每个表只能有一个主键。 因此，如果使多个列或多个组合列具有唯一性，则不能使用主键约束。幸运的是，MySQL提供了另一种索引，叫做唯一索引，允许我们可以使一个或者多个列的值具有唯一性。另外，不会像主键索引一样，我们的每张表中可以有很多个唯一索...
MySQL：设置唯一索引还是出现重复数据
最新发布
好幸运
04-28 726
一开始delete_id不能为空，设置一个默认值0或1；然后逻辑删除后清空delete_id的值，使其变成null。如果4个字段都设置为唯一索引，那么①的问题就无法解决了，会同时出现多个 id|1|1|0|null 这样的数据。MySQL中：两个值比较会出现：true、false、null 三种情况；①、唯一索引为null时，null和null是不相等的。null和null相比较会出现未知的类型。也就是说使用②方案后①的问题又出现了。②、逻辑删除时，唯一索引冲突。视频说法有点问题，不敢苟同。
mysql设置唯一性索引，仍有重复数据
qq_44821149的博客
10-25 489
唯一性索引里有值为NULL时，相同数据就可以共存；都不为NULL时，相同数据不能共存。因为好像是NULL被当成不同值了。
明明加了唯一索引，为什么还是产生了重复数据？
dotNET跨平台
06-29 747
在MySQL 8中，使用InnoDB引擎的表并添加了唯一索引，通常情况下是可以确保数据的唯一性的。然而，有一些特殊情况可能导致唯一索引失效，从而出现数据重复的情况。以下是可能导致这种情况发生的一些原因：索引定义错误：可能存在索引定义错误，导致索引没有覆盖所有需要唯一性约束的列。请确保唯一索引定义包含了正确的列或列组，并且没有遗漏任何关键列。字符集或排序规则问题：唯一索引是依赖于字符集和排序规则的。...
MySQL唯一索引重复插入数据解决方案总结.docx
10-26
MySQL 唯一索引重复插入数据解决方案总结 MySQL 唯一索引重复插入数据解决方案总结是指在 MySQL 中遇到唯一索引重复插入数据时的解决方案。这种情况下，MySQL 会报一个 Duplicate entry 的错误信息，表示不能在索引...
MySQL建立唯一索引实现插入重复自动更新
09-10
在MySQL中，"唯一索引"是一种特殊的索引类型，它确保了索引列中的每个值都是唯一的，不允许出现重复。这样的索引对于保证数据的唯一性和完整性至关重要，特别是在需要避免数据冗余和冲突的情况下。本文将详细介绍...
mysql下普通索引和唯一索引的效率对比
09-11
在MySQL数据库系统中，索引是一种用于加速数据检索...如果只需要提高查询速度，且允许重复值，普通索引则更为合适。在实际应用中，还应考虑其他因素，如索引维护成本、磁盘空间占用以及查询的复杂性，以做出最佳决策。
mysql 唯一索引出现重复数据_MySQL 创建唯一索引忽略对已经重复数据的检查
weixin_34364239的博客
02-27 1053
MySQL 创建唯一索引忽略对已经重复数据的检查在创建唯一索引的基础上加上关键字"IGNORE"即可。# 重复数据mysql> select aid,count(aid) as total ,email,tel_no,account_type,exten,passwd from fudao_admin group by user_name having total> 1;+-...
加了唯一索引，但数据还是有重复的，原来如此。
Counter-Strike大牛
09-20 4126
今天刚创建了一个表，为订单号创建了唯一索引。 在测试同学测试的过程中，看了一下数据，竟然有重复订单号？ 怎么想都想不明白，问了另一个大牛，他告诉我： 因为分库分表了。唯一键只能保证一个库中不重复，而不同库，无法限制。 我分库用的是平台ID，分表用的是订单号，我看了一下那两条数据，果然，平台ID不一样，那么他们有可能不在一个库里。 大牛说：你用同一个平台ID insert一下，我试了一下，果然插...
mysql索引有重复怎么处理的_面试官: 在使用mysql数据库时, 遇到重复数据怎么处理?...
weixin_39722196的博客
01-20 2858
前段时间，很多人问我能不能写一些数据库的文章，正好自己在测试mysql数据库性能的时候，出现了一个问题，也就是出现了很多重复的数据，想起来自己long long ago写过一篇类似的，仅此就拿来总结了一下。如果你在使用mysql的时候也遇到了这个问题，希望能对你有所帮助。注意：这篇文章不是数据库系列的正式文章，有关mysql、MongoDB、redis、oracle等数据库系列的文章正在整理中。其...
mysql中有重复数据建唯一索引
get
07-28 1607
ALTER TABLE tableA ENGINE MyISAM; /*注意：修改表结构为MyISAM */ ALTER IGNORE TABLE tableA ADD UNIQUE INDEX user_uid(uid); /*添加唯一索引，消重*/ ALTER TABLE table ENGINE InnoDB; /*可选，修改表结构为InnoDB */
MySQL 重复索引探讨(持续更新中...)
weixin_34337265的博客
10-09 276
2019独角兽企业重金招聘Python工程师标准>>> ...
MySQL冗余和重复索引
weixin_30340353的博客
11-02 144
　MySQL允许在相同列上创建多个索引，无论是有意还是无意，mysql需要单独维护重复的索引，并且优化器在优化查询的时候也需要逐个地进行考虑，这会影响性能。 　　重复索引是指的在相同的列上按照相同的顺序创建的相同类型的索引，应该避免这样创建重复索引，发现以后也应该立即删除。但，在相同的列上创建不同类型的索引来满足不同的查询需求是可以的。 CREATE TABLE test( ID...
mysql 5.7向已有重复数据表中创建唯一索引
weixin_41299767的博客
12-28 2409
因为mysql 5.7已经将alter ignore talbe语法去掉了。这在MySQL 5.6.25中工作正常,但在5.7.9中给出了语法错误，所以不能这样操作了，下面是我的操作思路。 ALTER IGNORE TABLE `table_name` ADD UNIQUE `some_id` (`some_id`); 1、按照已有表的结构创建一张新表 create table dfs_img_file_index_new like dfs_img_file_index; 2、查看新创建的表中是否
mysql中的冗余和重复索引
xiaoweids的博客
07-04 371
冗余索引和重复索引有一些不同，如果创建了索引（a,b），再创建索引（a）就是冗余索引，因为这只是前面一个索引的前缀索引，因此（a,b）也可以当作(a)来使用，但是（b,a）就不是冗余索引，索引(b)也不是，因为b不是索引（a,b）的最左前缀列，另外，其他不同类型的索引在相同列上创建（如哈希索引和全文索引）不会是B-Tree索引的冗余索引，而无论覆盖的索引列是什么。重复索引是指的在相同的列上按照相同的顺序创建的相同类型的索引，应该避免这样创建重复索引，发现以后也应该立即删除。怎么找出冗余索引和重复索引呢？
mysql8.0.32如何忽略重复值创建唯一索引
05-26
在 MySQL 8.0.32 中，可以通过在创建唯一索引时使用 `IGNORE` 关键字来忽略重复值。以下是示例 SQL 语句： ``` CREATE UNIQUE INDEX idx_name ON table_name (column_name) IGNORE; ``` 其中，`idx_name` 是索引...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值