超级会员免费看
在不影响生产系统的情况下，通过Linux+MySQL 5.7环境，对一张包含1.49亿条记录的大表进行删除操作。采用少量多次的策略，每次删除1万条，并利用delete语句结合limit提升效率，减少对应用的影响。测试结果显示，这种方法可以在2-5秒内完成1万条记录的删除，有效提高了删除大量数据的效率。
手头有一张大表数据1.49亿，决定将大约1.4亿较早的数据删除。
因为是生产系统，不能停机，因此之前写过的那些方法不适用。这里要用到一直不愿意用的delete。
在内部搭建了一个测试环境。
Linux+MySQL 5.7
逻辑条件：删除小于主键值小于条件值的记录。
方案：
一次性删除会导致应用无法正常使用该表。因此采取少量多次的方式执行。例如删除1000条符合条件的记录，然后等待几秒钟，再删除1000条符合条件的记录，再进入等待，循环往复。
测试：
本方案关键点是每次删除语句的效率，执行时间尽量少，减少对应用的影响。
测试delete单次删除1万条，所需时间大约9秒，2万条大约20秒左右。
5万条大约1分40-50秒，10万条时间比较长，要3分40-50秒。
这个结果不太理想，得想想办法。
在delete中加上limit会是什么效果？
如图，效率大幅提升。
其执行的结果是，记录按升序前10万条被删除。
按这个方
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
