分页查询、关联查询、in/exists和count优化

目录

1、分页查询优化

(1)根据自增且连续的主键排序的分页查询优化

(2)根据非主键字段排序的分页查询优化

2、关联查询优化

(1)嵌套循环连接 Nested-Loop Join(NLJ) 算法(关联字段有索引)

(2)基于块的嵌套循环连接 Block Nested-Loop Join(BNL)算法(关联字段无索引)

(3)对于关联 sql 的优化

3、in和exists优化

4、count(*)查询优化


1、分页查询优化

// 'employees' 建表结构同《Mysql explain 索引优化案例》,提前向表中补了10万条数据。

很多时候我们业务系统实现分页功能可能会用如下sql实现

--分页
select * from employees limit 10000,10;

表示从表 'employees' 中取出从 10001 行开始的 10 行记录。看似只查询了 10 条记录,实际这条 SQL 是先读取 10010 条记录,然后抛弃前 10000 条记录,然后读到后面 10 条想要的数据。因此要查询一张大表比较靠后的数据,执行效率非常低

(1)根据自增且连续的主键排序的分页查询优化

前提:表中数据主键是自增并且连续的

-- 优化前
select * from employees limit 90000,5;

-- 优化后
select * from employees where id > 90000 limit 5;

但是,这条改写的SQL 在很多场景并不实用,因为表中可能某些记录被删后,主键空缺,导致查询的结果不一致

另外如果原 SQL 是 order by 非主键的字段,按照上面说的方法改写也会导致两条 SQL 的结果不一致。所以这种改写得满足以下两个条件:

  • 主键自增且连续
  • 结果是按照主键排序的

(2)根据非主键字段排序的分页查询优化

根据非主键字段排序的分页查询,SQL 如下:

select * from employees ORDER BY name limit 90000,5;
EXPLAIN select * from employees ORDER BY name limit 90000,5;

发现并没有使用 name 字段的索引(key 字段对应的值为 null),具体原因:扫描整个索引并查找到没索引的行(可能要遍历多个索引树)的成本比扫描全表的成本更高,所以优化器放弃使用索引。

知道不走索引的原因,那么怎么优化呢?

关键是让排序时返回的字段尽可能少,所以可以让排序和分页操作先查出主键,然后根据主键查到对应的记录,SQL改写如下

select * from employees e inner join (select id from employees order by name limit 90000,5) ed on e.id = ed.id;
-- 分析
EXPLAIN select * from employees e inner join (select id from employees order by name limit 90000,5) ed on e.id = ed.id;

<

### MyBatis 中实现左连接一对多分页查询 在处理数据库查询时,特别是在涉及复杂关系的数据表之间执行操作时,MyBatis 提供了强大的功能来简化开发人员的工作。对于左连接(`LEFT JOIN`)的一对多分页查询场景,可以采用如下方式: #### SQL 查询语句设计 为了有效地获取父实体及其关联子实体列表并应用分页逻辑,在构建 `SELECT` 语句时需注意几点事项: - 使用外键约束定义两个表之间的联系; - 利用聚合函数如 `GROUP_CONCAT()` 或者窗口函数根据具体需求收集相关记录; - 应用合适的索引来优化性能。 针对一对多的关系模型,假设存在两张表分别为订单(`orders`)订单项(`order_items`),其中每条订单可能对应多个订单项,则可以通过下面的方式编写SQL: ```sql SELECT o.*, GROUP_CONCAT(oi.item_id) AS item_ids FROM orders o LEFT JOIN order_items oi ON o.order_id = oi.order_id WHERE o.status = 'active' AND (o.customer_name LIKE '%${searchText}%' OR EXISTS ( SELECT 1 FROM order_items WHERE order_id=o.order_id AND product_name LIKE '%${searchText}%' )) ORDER BY o.create_time DESC LIMIT #{start},#{size} ``` 此段代码实现了基于关键词模糊匹配的条件过滤以及按创建时间降序排列的结果集截取[^1]。 #### Mapper XML 文件配置 接着是在Mapper文件里声明相应的接口方法签名,并映射上述自定义SQL到Java对象上。这里展示了一个简单的例子用于说明如何设置resultMap属性从而完成复杂的嵌套结构转换工作: ```xml <resultMap id="OrderWithItemsResult" type="com.example.Order"> <id property="orderId" column="order_id"/> <!-- other columns mapping --> <collection property="items" ofType="com.example.Item"> <id property="itemId" column="item_id"/> <!-- other Item properties mappings --> </collection> </resultMap> <select id="findOrdersByPage" resultMap="OrderWithItemsResult" parameterType="map"> ${selectSqlString} </select> ``` 此处利用了 `<collection>` 标签指定集合类型的成员变量名及元素类别;而 `${}` 表达式的运用允许动态拼接部分SQL片段以适应不同上下文环境下的调用需求[^2]。 #### Java Service 层封装 最后一步就是在服务层内组装好必要的参数并通过调用DAO层暴露出来的API达成最终目的——即返回带有分页信息的对象实例给控制器层面做进一步渲染呈现: ```java public Page<Order> findOrderByPage(String searchText, int page, int size){ Map<String,Object> params=new HashMap<>(); String selectSql= "SELECT o.*, GROUP_CONCAT(DISTINCT oi.item_id SEPARATOR ',') as items"; params.put("selectSql",selectSql); params.put("searchText",searchText); params.put("start",(page-1)*size); params.put("size",size); List<Order> list=mapper.findOrdersByPage(params); long total=mapper.countTotalRecords(searchText); // 另一个单独的count查询 return new Page<>(list,total,page,size); } ``` 以上便是有关于MyBatis框架下实施带有限制条件的左联结一对多模式并且支持分页特性的整体解决方案概述[^3]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

swadian2008

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值