最近做一个需求,关于SQL高可用优化,需要优化项目中的SQL,提升查询效率。
SQL高可用优化
一、优化SQL包含distinct场景
1.1 原因
数据量:数据量越大,DISTINCT操作需要的时间和资源越多。
索引:如果查询中涉及到的列没有索引,数据库引擎可能需要全表扫描来执行DISTINCT操作,导致性能下降。
数据分布:如果数据分布不均匀,即某些值出现频率较高,DISTINCT操作会更耗时。
1.2 优化措施
(1)可以利用Set集合进行存储,Set集合会自动对数据进行去重
(2)可以用lambda表达式中distinct()方法进行去重
二、优化SQL中Where条件中索引字段是否为NULL
1.1 原因
对索引字段进行非空检查时,数据库可能会选择全表扫描而不是使用索引,因为索引中不包含NULL值,这会降低查询性能。
1.2 优化措施
在service层利用lambda表达式中进行去重
三、代码验证
1. NodeMapper
@DS("mysql1")
@Repository("NodeMapper")
public interface NodeMapper extends BaseMapper<NodeVo> {
@Select("select distinct esn from node_vo where name like 'GTS5900%'")
List<String> getNodeListByName(String name);
@Select("select esn from node_vo where name like 'GTS5900%'")
Set<String> getNodeSetByName(String name);
@Select("select esn from node_vo where name like 'GTS5900%'")
List<String> getNodeListNoDistinctByName(String name);
@Select("select esn from node_vo where esn like 'msk00%' and name != ''")
List<NodeVo>