MySQL高级性能优化---limit优化

最新推荐文章于 2024-11-04 19:36:12 发布
原创 最新推荐文章于 2024-11-04 19:36:12 发布 · 1.2k 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #limit #limit优化

当表中存在大批量数据时，limit查询随着offset增大速度会变慢，因其会取出前边的数据。文章介绍了两种limit优化方法：一是使用子查询优化，基于索引快速查询；二是使用id限定优化，记录上一页最大id号进行范围查询，但要求id列自增且数据不乱。

当表中存在大批量数据时分页如何优化？
我们先创建一张employee表， 使用存储过程或者函数创建1000万条数据。

limit查询分析

使用limit随着offset增大，查询的速度会越来越慢。
limit查询会把前边的数据都取出来，比如limit 100000， 10时会把前10万条数据取出找到对应的位置，再取10条数据。因此你的offset的值越大查询的数据就越多
在这里插入图片描述

所以我们对limit进行优化

1. 使用子查询优化limit查询

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

使用子查询优化limit归根结底还是基于索引快速查询，让耗时的查询走索引

2. 使用id限定优化

记录上一页最大的id号，使用范围查询。限定是只能使用于明确知道id的情况，不过一般建立表的时候，都会添加基本的id字段，这为分页查询带来很多便利。但是唯一的缺陷是id这一列必须是自增的。而且id这一列数据不能乱

在这里插入图片描述
在这里插入图片描述

Java性能优化-书写高质量SQL的建议(如何做Mysql优化)
BADAO_LIUMANG_QIZHI的博客
07-16 970
为避免开发过程中针对mysql语句的写法再次踩坑，总结开发过程中常用书写高质量sql的一些建议。
MySQL性能优化利器：pt-query-digest全方位解析与实战指南
最新发布
专注于编程、AI、人工智能等多个领域内容研究和分析
05-30 324
MySQL性能优化利器：pt-query-digest全方位解析与实战指南
Mysql limit 优化，百万至千万级快速分页 复合索引的引用并应用于轻量级框架
09-11
MySql 性能到底能有多高？用了php半年多，真正如此深入的去思考这个问题还是从前天开始。有过痛苦有过绝望，到现在充满信心！
大数据量limit分页优化
qq_28171173的博客
04-09 2883
背景 在通常的业务场景中，分页一般是使用MySQL提供的 limit 来实现从数据库中获取指定偏移量的数据行。在数据量较小的场景中，并没有太大的问题，但当数据量膨胀到一定程度，获取靠后的分页数据时，性能下降就会特别的大。 原因在于MySQL需要根据偏移量扫描出所有符合的数据，然后再从中取分页记录数返回，其余数据全部丢弃。如 select * from t limit 100000, 10; MySQL需要扫描 100010 行数据并返回最后的10条。 解决方案 1.限制分页数量（减少...
Mysql 大表limit查询优化&原理&实战
jianghuchuang的博客
11-04 807
答：正常情况下不行，例如你select * ，那么此时你的查询耗时会和优化前查询耗时一样，因为此时你的查询不是覆盖索引查询，由于非聚簇索引里面没有你要select的内容，故而innodb直接就不借助非聚簇索引找第8w条记录；：由于你的叶子存的是记录的ID，一个叶子节点占用空间小，故而一次IO可以查询到大量的叶子节点，故而只需要少次IO次，才能快速找到第8w条记录的ID。：由于你的叶子存的是数据，一个叶子节点占用空间大，故而一次IO可能查询到少数的叶子节点，故而需要IO很多次，才能找到第8w条记录。
mysql分页limit 优化
Willko's Blog
02-09 202
mysql的分页比较简单，只需要limit offset,length就可以获取数据了，但是当offset和length比较大的时候，mysql明显性能下降 [b]1.子查询优化法[/b] 先找出第一条数据，然后大于等于这条数据的id就是要获取的数据 缺点：数据必须是连续的，可以说不能有where条件，where条件会筛选数据，导致数据失去连续性 实验下 [code="sql"...
Mysql数据优化
zq140311的博客
05-27 367
优化 MySQL 亿级数据分页的奇妙经历！ POST domain/v1.0/module/method?order=condition&orderType=desc&offset=1800000&limit=500 domain、module 和 method 都是化名，代表接口的域、模块和实例方法名，后面的offset和limit代表分页操作的偏移量和每页的数量，也就是说该同学是在 翻第（1800000/500+1=3601）页。初步捞了一下日志，发现 有8000多次这样调用。
MySQL高级优化之-查询逻辑及where条件提取.pdf
11-07
MySQL的查询优化是数据库性能提升的关键环节，尤其是在处理复杂查询和大数据量时。本篇文章将深入探讨MySQL查询逻辑处理步骤以及如何有效地提取WHERE条件，以实现更高效的查询优化。 首先，MySQL的查询逻辑处理分为...
【MySQL】A01、性能优化-结构设计与配置
下半夜的风
04-24 1301
所谓的垂直拆分，就是把原来一个有很多列的表拆分成多个表，这解决了表的宽度问题。
【MySQL】性能优化
陈书予
03-20 1万+
在设计数据库之前，需要定义数据库所应该具备的范畴，例如：维度、表、标识符等，这些都是数据库设计的重要方面。这对于数据库查询以及在数据库中查找涉及的字段非常重要并可以提高查询速度。在进行数据库的设计和开发时，命名规范是非常重要的，可以有效地减少命名混乱、重名和不同的命名方式等问题，提高数据库的可维护性和易读性。定义合理的命名规范，有助于快速定位到所需的数据和数据库对象，节省了繁琐的开发时间和人工成本。
Mysql的LIMIT简介 及 优化
LEAF
02-26 1667
 Mysql的LIMIT简介LIMIT子句可以被用来限制SELECT语句返回的行数。LIMIT取1个或2个数字参数，如果给定2个参数，第一个指定要返回的第一行的偏移量，第二个指定返回行的最大数目。初始行的偏移量是0(不是1)。mysql> select * from table LIMIT 6,10; # 得到第7-16行如果给定一个参数，它指出返回行的最大数目。 mysql> selec
mysql的limit性能优化
铁柱的博客
06-02 1833
MySQL大数据量分页查询方法及其优化 ---方法1: 直接使用数据库提供的SQL语句 ---语句样式: MySQL中,可用如下方法: SELECT * FROM 表名称 LIMIT M,N ---适应场景: 适用于数据量较少的情况(元组百/千级) ---原因/缺点: 全表扫描,速度会很慢 且 有的数据库结果集返回不稳定(如某次返回1,2,3,另外的一次返回2,1,3)
Mysql Limit优化
哆啦A梦丶幻想的博客
02-10 769
文章目录前言一、数据demo二、案例SQL二、优化案例SQL二、结果对比1. 优化前12.486s2. 优化后0.102秒总结 前言 我们知道查询除主键和当前索引列外其他数据时，想要走二级索引，查询的数据比例占全部数据的比例比较低才行，否则就会走全表查询 一、数据demo 表test_model CREATE TABLE IF NOT EXISTS `test_model` ( `id` varchar(32) NOT NULL, `time_recorded` datetime(0) N
mysql limit 优化
Dr.Yang 的专栏
01-17 829
mysql limit 优化
MySQL的limit优化
热门推荐
京北游戏官方
09-02 1万+
MySQL的limit优化
你知道MySQL的Limit有性能问题吗
weixin_34402408的博客
05-08 320
MySQL的分页查询通常通过limit来实现。 MySQL的limit基本用法很简单。limit接收1或2个整数型参数，如果是2个参数，第一个是指定第一个返回记录行的偏移量，第二个是返回记录行的最大数目。初始记录行的偏移量是0。 为了与PostgreSQL兼容，limit也支持limit # offset #。 问题： 对于小的偏移量，直接使用limit来查询没有什么问题，但随着数据量的增大，越往...
mysql limit查询优化_mysql优化limit查询语句的5个方法
weixin_36044301的博客
01-18 501
mysql的分页比较简单，只需要limit offset,length就可以获取数据了，但是当offset和length比较大的时候，mysql明显性能下降1.子查询优化法先找出第一条数据，然后大于等于这条数据的id就是要获取的数据缺点：数据必须是连续的，可以说不能有where条件，where条件会筛选数据，导致数据失去连续性，具体方法请看下面的查询实例：mysql> set profili...
Mysql中limit的优化
liuliufa的专栏
03-22 1975
在一些情况中，当你使用LIMIT row_count而不使用HAVING时，MySQL将以不同方式处理查询。·         如果你用LIMIT只选择一些行，当MySQL选择做完整的表扫描时，它将在一些情况下使用索引。·         如果你使用LIMIT row_count与ORDER BY，MySQL一旦找到了排序结果的第一个row_count行，将结束排序而不是排序整个表。如果使
MySQL高级优化：查询与索引实战解析
使用DISTINCT关键字和LIMIT限制结果集也是常见的性能优化手段。 6. JOIN查询实践：文章提供了七个不同JOIN类型的图解实验，包括INNER JOIN、LEFT JOIN、RIGHT JOIN、FULL JOIN（通过UNION和JOIN结合实现）等，通过...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值