列表越往下刷,为什么还会出现重复内容?

博客深入剖析列表下拉时出现重复内容或漏项的根本原因,指出问题常源于分页机制(如偏移量分页)在数据动态变化(新增、删除、状态变更)下的不稳定性,而非网络重复传输。重点讨论排序不完整、游标分页设计、弱网下数据一致性、快照机制及验收约定等关键技术点,强调需结合请求参数、ID序列与数据变更日志进行精准归因。

假设你正在翻一份按时间倒序排列的工单列表。第一页看完,继续往下滑,等了几秒,下一页终于出现。刚看过的一张工单又来了,另外一张印象中存在的工单却怎么也翻不到。

这时容易怀疑网络是不是把数据“发重了”。但如果接口每次都正确返回了查询结果,问题也可能出在分页规则上:两次查询之间,列表本身已经变了。

弱网把翻页的等待拉长,恰好让更多新增、删除和状态变更发生在两页之间。要查清原因,需要同时保留请求参数和数据变化记录。

页码相同,指向的位置可能已经不同

用一个很小的列表就能看清楚。

最初的数据按编号倒序排列:105、104、103、102、101、100。每页取三条,第一页得到 105、104、103。

在请求第二页之前,新工单 106 插到了顶部。此时列表变成 106、105、104、103、102、101、100。如果第二页仍按“跳过前三条,再取三条”查询,返回的就是 103、102、101。103 重复出现了。

在这里插入图片描述

图 1|每页三条的示意数据。新增记录改变了位置;两次请求没有重复发送,也可能出现重复项。

删除也会改变边界。如果第一页读完后,前面的记录被删除,后面的记录向前移动,继续按固定数量跳过,就可能漏掉尚未展示的记录。

这个问题不需要网络层真的复制数据包。看见相同卡片出现两次,先核对它的业务 ID,以及它分别属于哪一页。

先把排序写完整

即便两次请求之间没有新增、删除,排序条件不完整也可能让分页结果不稳定。

例如,只按创建时间倒序,而同一秒内有多条记录,它们之间的顺序就没有被明确约束。可以按业务要求再加一个稳定、唯一的字段作为同值时的排序依据。

PostgreSQL 文档也提醒,使用 LIMIT 获取部分结果时,应通过 ORDER BY 约束出唯一顺序;否则不同分页查询拿到的子集可能不一致。

不过,排序稳定只解决一部分问题。刚才插入 106 的例子已经采用唯一编号排序,偏移位置仍然会变化。

客户端按 ID 去重,可以避免重复卡片直接出现在界面里,却补不回遗漏的数据。如果验收只看“没有重复项”,很容易把问题藏起来。

下一页,究竟接着什么继续取

对于按稳定字段排序的列表,可以考虑使用游标:把上一页最后一条记录的排序位置作为下一次查询的边界,而不是只记录已经跳过多少条。

在刚才的示例里,第一页末尾是 103,下一页继续取排在 103 后面的记录。顶部新增 106,就不会把这个边界直接推走。排序由多个字段组成时,边界也需要表达完整的排序条件,而不能只取其中一个时间戳。

游标并不自动提供快照。如果记录的排序字段会变化,或者筛选条件中的状态在翻页时改变,仍然需要明确数据一致性要求。榜单按热度不断重排,与按创建时间浏览历史工单,适合的规则可能不同。

有些业务希望本轮翻页保持一份稳定结果,可以由服务端提供快照标识或版本边界;另一些业务允许实时变化,但要说明新内容如何进入列表。不要仅因为接口里出现了 cursor 字段,就认定不会漏项。

给列表变化留出可观察的窗口

用我自己开发的 Android 工具「弱网管家」做这类检查时,可以先选定测试应用,再用独立模板拉长返回等待。数据变化则由受控测试后台准备。

在这里插入图片描述

图 2|2026-10-26 的 Pixel 6 真机截图,弱网管家 1.0.2。图中尚未选择目标应用,也未启动测试。

建议先在原始网络下把固定数据翻完,确认排序与分页基础行为。下一轮再增加下行延迟,例如填写 800 ms,上行延迟、抖动与丢包先保持 0,让两次翻页之间更容易安排操作。

在这里插入图片描述

图 3|实机配置示例:上行延迟 0、下行延迟 800 ms。此数值是模拟设置,不是接口耗时,也不保证固定的查询执行顺序。

一次具体的用例可以这样准备:先加载第一页;由测试后台确认插入 106 完成;再触发第二页,保存请求参数和返回的 ID 序列。如果要检查查询执行中的变化,需要测试接口提供明确的同步点,不能只凭肉眼等待两秒。

弱网管家负责改变网络条件,不负责向业务库插入工单,也不会自动判断游标是否正确。这两个职责分开,复现记录才容易交给开发者核对。

别用一张长截图证明列表完整

可见卡片没有重复,不代表数据集合正确。更有用的记录是:初始数据集、每次变更、每页返回的 ID、客户端最终展示的 ID。

测试变化要核对的内容
顶部新增记录原有记录是否重复;新内容按什么规则进入本轮列表
已读区域删除记录未读记录是否被跳过
多条记录排序值相同次序是否稳定,边界条件是否完整
记录状态或排序字段改变是否符合业务约定的实时或快照语义
翻页失败后重试失败前没有提前推进游标,同一页不会被重复拼接

还要把“没有更多了”与“本次请求失败”分开。请求超时以后把列表标成结束,用户就再也没有机会触发下一页,即使底部确实还有数据。

重试成功后,再检查页码或游标更新时机。只有确认当前页已被正确接纳,才能推进下一次边界。对于仍在加载中的分页入口,也要避免同一个边界被重复派发后重复追加。

验收前,先约定这轮列表应该包含什么

实时列表没有一个永远不变的“正确总数”。验收需要先说明:本轮是否包含后来新增的记录,已删除记录如何处理,顺序变化是否允许影响已展示内容。

如果采用快照,就按快照对应的集合核对;如果采用实时策略,就按约定的更新规则核对。去重、游标和快照各自解决什么问题,要写在用例里。

下一次遇到“翻着翻着又看见同一条”,可以先把两页 ID 摆在一起。它们比一张转圈截图更容易说明,边界究竟是在客户端推进错了,还是在数据变化后已经失去了原来的含义。

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值