文章讨论了大数据量下分页查询可能导致的数据丢失问题，原因是创建时间精确度不足。解决方法是采用毫秒级时间戳，并通过SQL更新存量数据。同时提及了动态增删操作也可能引发重复或遗漏。文章还推荐了其他资源来处理类似问题。
按照创建时间排序的分页查询在数据量大时可能会造成分页时数据丢失
原因：创建时间仅到时分秒，因此可能会有多条数据的创建时间相同，导致排序混乱，从而在分页时造成个别数据未查询到
解决方式：可将创建时间精确到毫秒，类型改为timestamp(6)
对于存量数据的创建时间增加毫秒值sql如下：
update xxx set create_date = create_date + age(clock_timestamp()::timestamp(6), clock_timestamp()::timestamp(0))
即生成一个精确到秒和精确到毫秒的当前时间，将它俩的差值拼接在原有的存量数据上
另外引起数据分页查询重复或丢失也可能是数据的动态增删导致:
可参考以下作者文章:
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
