SQL Server 索引结构及其使用(二)

多尺度Transformer+特征融合新范式,算力减半精度猛增 在大模型时代,多尺度特征融合与Transformer架构的结合正成为研究热点。多尺度特征融合能够捕捉数据在不同尺度上的关键信息,而Transformer架构凭借其强大的并行处理能力和对长距离依赖的建模能力,为复杂数据处理提供了新的思路。这种结合在处理多模态数据时展现出巨大潜力。 阅读详情
改善SQL语句
  
  很多人不知道SQL语句在SQL SERVER中是如何执行的,他们担心自己所写的SQL语句会被SQL SERVER误解。比如:
  
  select * from table1 where name=''zhangsan'' and tID > 10000
  和执行:
  
  select * from table1 where tID > 10000 and name=''zhangsan''
  
  一些人不知道以上两条语句的执行效率是否一样,因为如果简单的从语句先后上看,这两个语句的确是不一样,如果tID是一个聚合索引,那么后一句仅仅从表的10000条以后的记录中查找就行了;而前一句则要先从全表中查找看有几个name=''zhangsan''的,而后再根据限制条件条件tID>10000来提出查询结果。
  
  事实上,这样的担心是不必要的。SQL SERVER中有一个“查询分析优化器”,它可以计算出where子句中的搜索条件并确定哪个索引能缩小表扫描的搜索空间,也就是说,它能实现自动优化。
  
  虽然查询优化器可以根据where子句自动的进行查询优化,但大家仍然有必要了解一下“查询优化器”的工作原理,如非这样,有时查询优化器就会不按照您的本意进行快速查询。
  
  在查询分析阶段,查询优化器查看查询的每个阶段并决定限制需要扫描的数据量是否有用。如果一个阶段可以被用作一个扫描参数(SARG),那么就称之为可优化的,并且可以利用索引快速获得所需数据。
  
  SARG的定义:用于限制搜索的一个操作,因为它通常是指一个特定的匹配,一个值得范围内的匹配或者两个以上条件的AND连接。形式如下:
  
  列名 操作符 <常数 或 变量>
  
  或
  
  <常数 或 变量> 操作符列名
  列名可以出现在操作符的一边,而常数或变量出现在操作符的另一边。如:
  
  Name=’张三’
  
  价格>5000
  
  5000<价格
  
  Name=’张三’ and 价格>5000
  
  如果一个表达式不能满足SARG的形式,那它就无法限制搜索的范围了,也就是SQL SERVER必须对每一行都判断它是否满足WHERE子句中的所有条件。所以一个索引对于不满足SARG形式的表达式来说是无用的。
  
  介绍完SARG后,我们来总结一下使用SARG以及在实践中遇到的和某些资料上结论不同的经验:
  
  1、Like语句是否属于SARG取决于所使用的通配符的类型
  
  如:name like ‘张%’ ,这就属于SARG
  
  而:name like ‘%张’ ,就不属于SARG。
  原因是通配符%在字符串的开通使得索引无法使用。
  
  2、or 会引起全表扫描
  Name=’张三’ and 价格>5000 符号SARG,而:Name=’张三’ or 价格>5000 则不符合SARG。使用or会引起全表扫描。
  
  3、非操作符、函数引起的不满足SARG形式的语句
  不满足SARG形式的语句最典型的情况就是包括非操作符的语句,如:NOT、!=、<>、!<、!>、NOT EXISTS、NOT IN、NOT LIKE等,另外还有函数。下面就是几个不满足SARG形式的例子:
  
  ABS(价格)<5000
  
  Name like ‘%三’
  
  有些表达式,如:
  
  WHERE 价格*2>5000
  
  SQL SERVER也会认为是SARG,SQL SERVER会将此式转化为:
  WHERE 价格>2500/2
  但我们不推荐这样使用,因为有时SQL SERVER不能保证这种转化与原始表达式是完全等价的。
  
  4、IN 的作用相当与OR
  
  语句:
  
  Select * from table1 where tid in (2,3)
  
  和
  
  Select * from table1 where tid=2 or tid=3
  是一样的,都会引起全表扫描,如果tid上有索引,其索引也会失效。
  
  5、尽量少用NOT
  
  6、exists 和 in 的执行效率是一样的
  很多资料上都显示说,exists要比in的执行效率要高,同时应尽可能的用not exists来代替not in。但事实上,我试验了一下,发现二者无论是前面带不带not,二者之间的执行效率都是一样的。因为涉及子查询,我们试验这次用SQL SERVER自带的pubs数据库。运行前我们可以把SQL SERVER的statistics I/O状态打开:
  
  (1)select title,price from titles where title_id in (select title_id from sales where qty>30)
  该句的执行结果为:
  
  表 ''sales''。扫描计数 18,逻辑读 56 次,物理读 0 次,预读 0 次。
  表 ''titles''。扫描计数 1,逻辑读 2 次,物理读 0 次,预读 0 次。
  
  (2)select title,price from titles
  where exists (select * from sales
  where sales.title_id=titles.title_id and qty>30)
  第二句的执行结果为:
  
  表 ''sales''。扫描计数 18,逻辑读 56 次,物理读 0 次,预读 0 次。
  表 ''titles''。扫描计数 1,逻辑读 2 次,物理读 0 次,预读 0 次。
  
  我们从此可以看到用exists和用in的执行效率是一样的。
  
  7、用函数charindex()和前面加通配符%的LIKE执行效率一样
  前面,我们谈到,如果在LIKE前面加上通配符%,那么将会引起全表扫描,所以其执行效率是低下的。但有的资料介绍说,用函数charindex()来代替LIKE速度会有大的提升,经我试验,发现这种说明也是错误的:
  
  
  select gid,title,fariqi,reader from tgongwen
  where charindex(''刑侦支队'',reader)>0 and fariqi>''2004-5-5''
  用时:7秒,另外:扫描计数 4,逻辑读 7155 次,物理读 0 次,预读 0 次。
  
  select gid,title,fariqi,reader from tgongwen
  where reader like ''%'' + ''刑侦支队'' + ''%'' and fariqi>''2004-5-5''
  用时:7秒,另外:扫描计数 4,逻辑读 7155 次,物理读 0 次,预读 0 次。
  
  8、union并不绝对比or的执行效率高
  我们前面已经谈到了在where子句中使用or会引起全表扫描,一般的,我所见过的资料都是推荐这里用union来代替or。事实证明,这种说法对于大部分都是适用的。
  
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen
  where fariqi=''2004-9-16'' or gid>9990000
  用时:68秒。扫描计数 1,逻辑读 404008 次,物理读 283 次,预读 392163 次。
  
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen where fariqi=''2004-9-16''
  union
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen where gid>9990000
  用时:9秒。扫描计数 8,逻辑读 67489 次,物理读 216 次,预读 7499 次。
  
  看来,用union在通常情况下比用or的效率要高的多。
  
  但经过试验,笔者发现如果or两边的查询列是一样的话,那么用union则反倒和用or的执行速度差很多,虽然这里union扫描的是索引,而or扫描的是全表。
  
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen
  where fariqi=''2004-9-16'' or fariqi=''2004-2-5''
  用时:6423毫秒。扫描计数 2,逻辑读 14726 次,物理读 1 次,预读 7176 次。
  
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen where fariqi=''2004-9-16''
  union
  select gid,fariqi,neibuyonghu,reader,title from Tgongwen where fariqi=''2004-2-5''
  用时:11640毫秒。扫描计数 8,逻辑读 14806 次,物理读 108 次,预读 1144 次。
  
  9、字段提取要按照“需多少、提多少”的原则,避免“select *”
  我们来做一个试验:
  
  select top 10000 gid,fariqi,reader,title from tgongwen order by gid desc
  用时:4673毫秒
  
  select top 10000 gid,fariqi,title from tgongwen order by gid desc
  用时:1376毫秒
  
  select top 10000 gid,fariqi from tgongwen order by gid desc
  用时:80毫秒
  
  由此看来,我们每少提取一个字段,数据的提取速度就会有相应的提升。提升的速度还要看您舍弃的字段的大小来判断。
  
  10、count(*)不比count(字段)慢
  某些资料上说:用*会统计所有列,显然要比一个世界的列名效率低。这种说法其实是没有根据的。我们来看:
  
  select count(*) from Tgongwen
  用时:1500毫秒
  
  select count(gid) from Tgongwen
  用时:1483毫秒
  
  select count(fariqi) from Tgongwen
  用时:3140毫秒
  
  select count(title) from Tgongwen
  用时:52050毫秒
  
  从以上可以看出,如果用count(*)和用count(主键)的速度是相当的,而count(*)却比其他任何除主键以外的字段汇总速度要快,而且字段越长,汇总的速度就越慢。我想,如果用count(*), SQL SERVER可能会自动查找最小字段来汇总的。当然,如果您直接写count(主键)将会来的更直接些。
  
  11、order by按聚集索引列排序效率最高
  我们来看:(gid是主键,fariqi是聚合索引列):
  
  select top 10000 gid,fariqi,reader,title from tgongwen
  用时:196 毫秒。 扫描计数 1,逻辑读 289 次,物理读 1 次,预读 1527 次。
  
  select top 10000 gid,fariqi,reader,title from tgongwen order by gid asc
  用时:4720毫秒。 扫描计数 1,逻辑读 41956 次,物理读 0 次,预读 1287 次。
  
  select top 10000 gid,fariqi,reader,title from tgongwen order by gid desc
  用时:4736毫秒。 扫描计数 1,逻辑读 55350 次,物理读 10 次,预读 775 次 
3D 结构光相机工作原理全解 | 从编码投射到三维重建,原理 + 代码 + 工业实战一站式掌握 本文从3D结构光相机的整体架构出发,层层拆解了编码投射、相位计算、相位解包裹、三维重建的核心原理,补充了工业实战所需的公式推导、代码实现、参数调优、设备选型和案例落地,核心总结如下:相位是3D结构光成像的“灵魂”,其精度、稳定性直接决定3D重建的效果,包裹相位与绝对相位的区分的是工业实战的基础;编码投射的核心是“正弦条纹+格雷码条纹”组合,正弦条纹负责高精度相位提取,格雷码条纹辅助解包裹,适配工业场景的精度与稳定性需求; 阅读详情

相关推荐

MOS管热阻的测量方法

实验室内如何测试mos管热阻

weixin_43492562的博客 4090

SQL Server 索引结构及其使用(二)[转]

SQL Server 索引结构及其使用(二)作者:freedk 一、深入浅出理解索引结构 改善SQL语句  很多人不知道SQL语句在SQL SERVER中是如何执行的,他们担心自己所写的SQL语句会被SQL SERVER误解。比如: select * from table1 where name=''zhangsan'' and tID > 10000 和执行: ...

anku0825的博客 151

From Manual to Magic: How nnU-Net is Revolutionizing Biomedical Image Segmentation Without Human Int

本文探讨了nnU-Net如何通过全自动深度学习技术革新生物医学图像分割领域。作为自我配置的智能系统,nnU-Net无需人工干预即可完成从数据预处理到模型训练的全流程,显著提升医学影像分割的效率和精度,尤其在CT和MRI影像分析中表现卓越。

metal的博客 1082

sql server 索引阐述系列二 索引存储结构

 "流光容易把人抛,红了樱桃,绿了芭蕉“ 转眼又年中了,感叹生命的有限,知识的无限。在后续讨论索引之前,先来了解下索引和表数据的内部结构,这一节将介绍页的存储,页分配单元类型,区的存储, 最后简要介绍下系统页存储类型,页中的数据结构。1.1  页存储  页是 sql server存储数据的基本单位,大小为8kb, 它存储的类型包括表,索引数据,分配位图,可用空间信息等,页也是可以读写的最小I/0单...

li123128的博客 677

AGX Orin设计-外围电路设计之一

AGX ORIN是英伟达Jetson系列中算力规格最高端的模组,其高达200TOPS/275TOPS的算力可以为各类场景提供澎湃的算力支持,本篇文章针对AGX ORIN的常规外围电路设计做分析描述。

zhiyuchenkeji的博客 4475

激光可燃气体传感器DIY指南:从TDLAS原理到STM32实战(附代码)

本文详细介绍了如何DIY激光可燃气体传感器,从TDLAS原理到STM32实战,包括硬件选型、光路搭建、电子系统设计和嵌入式软件开发。通过TDLAS技术实现高灵敏度甲烷检测,适合工业安全和环境监测应用。附有完整代码和实用调试技巧,帮助开发者快速掌握光学气体检测技术。

fanta的博客 440

【转】SQL Server 索引结构及其使用(二)

SQL Server 索引结构及其使用(二)作者:freedk一、深入浅出理解索引结构 改善SQL语句  很多人不知道SQL语句在SQL SERVER中是如何执行的,他们担心自己所写的SQL语句会被SQL SERVER误解。比如:select * from table1 where name=''zhangsan'' and tID > 10000 和执行:select * f...

de7654的专栏 147

基于matlab的CNN验证码识别系统(UI界面版)

基于matlab的CNN验证码识别系统(UI界面版),CNN验证码识别系统包括数据集处理、模型搭建、模型训练、界面设计与实现

在职AI算法工程师,擅长计算机视觉,YOLO目标检测、分割等,擅长web、pyqt界面可视化,好内容持续更新中,来这里跟大家一起学习,共同进步 480
上一篇: SQL Server 索引结构及其使用(一)
下一篇: SQL Server 索引结构及其使用(三)
shadow_x
博客等级 码龄19年 4粉丝 0原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值