MySql分页出现重复数据的问题

最新推荐文章于 2025-07-05 23:36:17 发布
最新推荐文章于 2025-07-05 23:36:17 发布
阅读量1.6k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/sunsgne_AC/article/details/93879766
在处理用户角色列表时遇到分页数据重复的问题，原因是SQL排序字段update_time存在相同值。通过调整排序依据为唯一ID，确保了数据的正确性和唯一性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

今天正在搬砖的时候运营报过来一个问题，查询用户角色列表数据丢失了，通过查询发现是因为分页导致的第一页和第二页有重复数据

像上面这两张图一样，去扒代码中的sql发现sql语句用了order by update_time 做排序，通过对比丢失的数据和重复数据发现他们的update_time是一样的。

解决办法就是order by 唯一数据 例如 order by id ,这样保证排序条件的唯一性就可以了 

mysql 分页查询出现重复数据分析排查
逍遥散人的博客
12-31 2379
mysql 分页查询出现重复数据问题排查mysql 分页查询出现重复数据问题分析定位问题解决方案 mysql 分页查询出现重复数据 2019的最后一天，才发现今年快过去了，就想着写点东西纪念一下，而且正好昨天项目上遇见一个让我感到很奇怪的问题，一个简单的分页查询居然出现问题了，让人难以置信啊，但是问题就是出现了。所以现在就将我对这件事的问题排查过程做一个简单的记录。希望能帮助到大家。顺便方便自己做...
mysql5.7排序和分页出现重复数据
小小坚的博客
01-29 1057
场景 我们使用分页查询时候经常会遇到需要对某个或者某几个字段进行排序，在排序字段有相同值的情况下有可能最后的排序结果不是我们预期的样子，我们来看下一个例子。 表里面的creaet_datetime列的数据是有重复的，一般情况下我们分页的sql是这样的。 第一页 第四页 可以发现，id为8的这条数据出现在了第一页和第页当中，这样就不是我们预期当中的结果。 那这是为什么呢？ 分析 在我们以往的经验和理解当中，这里应该是先进行order by排好序，然后再取对应的分页数据。其实在mysql5.7当中并不是
当order by遇到重复值，有个很经典的坑！
Sandy_lss的博客
05-28 603
当我们在使用order by的时候，有一个很经典的坑。不知道大家是否踩过。当我们使用orderby子句对结果进行排序时，如果有相同值的情况，MySQL会在排序时随机地对它们进行排列。这意味着，如果我们不注意在分页时正确地处理这些相同值，就会导致同一条数据出现在多个页面上.
使用LIMIT + OFFSET 分页时，数据重复的风险
最新发布
wxd0116的博客
07-05 524
在实际应用中，若数据变动频繁且对一致性要求高，应优先选择书签 / 键集分页，从根本上避免数据重复问题。
mysql-分页数据重复
一个博客
07-13 1707
以前碰到过类似问题，是因为排序字段导致的，因为排序字段一样导致分页临界点的查询数据展示可能会重复。分页查询不同页出现重复数据，底层实现都是使用limit。从51条开始，显示后面的100条。第101条开始的50条数据。
MySQL分页时出现的数据重复问题
m0_38048955的博客
12-27 1281
如何解决
解决MySQL中分页查询时多页有重复数据，实际只有一条数据的问题
程序员大腾的博客
07-19 1830
使用主键进行分页查询就不会产生数据排序重复/缺失的问题
MySQL在分页查询中出现数据重复
Nightliar的博客
03-07 5640
在工作中，发现分页中出现重复数据，一般都是相邻的两页有部分数据重复，经过刷新后，这部分数据又有可能不重复，然而查询出来的总数是正确的，因为主键都是一样的，所以数据库中数据是正确的。那么先看看那些重复数据有什么相同点。 经发现容易出现重复的数据，它的时间都是非常相近的。那么再看看分页的sql语句 select from user_member where isDelete=0
Mybatis MySQL数据库分页查询出现重复数据
朱政雄的博客
09-11 3687
MySQL分页查询出现重复数据 情景(situation):   今天在生产环境，业务同事导出文件时遇到了出现重复数据的问题。因为之前这个功能是我和我带的外包同事一起做的，所以很熟悉这块代码。经过线上操作核对，和代码检测，发现线上查询确实出现了重复数据，而导出文件出现重复数据是因为导出功能后面使用的接口是我提供的分页接口。通过代码分析，基本确认后台应用端代码应该是没有问题的，那么问题就出现在我提供...
MySQL分页查询limit数据重复踩坑记
云树在路上
03-24 1918
1. 问题背景 线上有一个批处理任务，会批量读取昨日的数据，经过一系列加工后，插入到今日的表中。表结构如下： CREATE TABLE `detail_yyyyMMdd` ( `id` bigint(20) NOT NULL AUTO_INCREMENT COMMENT '主键', `batch_no` varchar(64) NOT NULL COMMENT '批次号', `order_id` varchar(64) NOT NULL COMMENT '订单ID', `user_id` v
mysql 数据查重与查重分页
u014685642的博客
12-29 865
我们有时会遇到复杂的查重，博客提供mysql复杂查重灵感
数据库分页有重复数据
yangaming的专栏
10-26 712
在工作中发现系统中数据第一页和第二页以后后面的一部分数据相同，原因为分页的时候排序，但是排序的字段不唯一，像市值，大量的重复，就会导致出现重复数据，解决的办法是：再找一个唯一的字段，一起排序
mysql 分页查询数据重复出现
学为
05-19 2927
mysql分页数据重复
Mysql分页查询出现重复数据
zhuxiang997的博客
02-22 2271
1、执行sql语句，根据商品销量来进行分页查询 SELECT goods_spu.* FROM goods_spu goods_spu WHERE goods_spu.`shop_id` = '1450999734971478018' AND goods_spu.`shelf` = 1 AND goods_spu.tenant_id = '1' ORDER BY goods_spu.sale_num DESC LIMIT 0,10 当所有商品销量都为0或者都一样的情况下就会出现不同分页参...
mysql分页查询出现重复数据
lwy23czl的博客
01-05 1336
就是因为在分页排序的时候，排序字段的值出现重复，就会导致分页结果不正确。因为sql多个字段排序，先按第一个排序字段排序，如果第一个排序字段的值相等，则按第二个排序字段排序，以此类推…所以尽量使用值唯一的字段进行排序，如果无法避免，则使用值唯一的字段(例如时间戳)充当第二个排序字段。在查询语句的排序字段中再加上一个排序字段。尽量要求是当第一个排序字段重复时，值能够唯一的。第一条sql是根据是否置顶排序查询test表的。第二条sql是根据是否置顶排序查询test表的。结果发现id=10的数据。
SQL分页之数据重复出现
ww_frozenTear的博客
08-29 634
mysql postgresql oracle等相关数据库，在sql没有显示指定order by的时候返回顺序"随机"
分页查询的重复数据问题
q939707163的博客
06-13 467
数据的增删改，以及数据的缓存，都可能会对mysql的结果输出顺序造成影响。所以，极有可能执行完（1）后返回1，2，3，4，执行完（2）后返回4，5，6，7的情况，造成部分数据重复查询，部分数据漏查的情况(ORACLE默认排序也会有同样的问题)。（3）如果要避免有删除、插入对查询结果集造成影响，则需要利用上一次分页查询结果作为下一次查询的条件，不断对查询结果进行过滤，来确保得到正确的查询结果。在执行完（1）后，返回id值为1,2,3,4的数据，执行完（2）后返回id值为5，6，7，8的数据。
分页出现数据重复数据问题的解决方案
龚清林的博客
07-13 1205
分页请求时，有新数据加入时，下一页会出现重复数据问题
分页查询数据重复——第三种情况
weixin_56772904的博客
10-21 6370
小白的上班常态： 每天不是玩bug就是被bug玩，每天痛并快乐着 干货： 分页查询数据重复的情况，一般原因：1.order by 排序字段不是唯一主键或者有重复数据导致造成；2.在翻页过程中有新数据插入导致数据读写冲突导致造成 解决办法：1.使用order by 排序时，加上主键或者不会重复的字段（一般建议唯一主键，如果选择时间字段，数据量过大时，有可能会重复，导致分页数据乱序或重复）；2.如果每页数量固定，可以在前段传入数据时，主键部位设置为自增id，避免插入数据之后导致传值不变，而数据库实际增加，导致的
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值