SQL优化

做了很多年有关数据库的开发工作,现在把我对sql优化的一些经验分享下。(由于我主要使用mysql,对其它结构化数据库不太熟悉,所以可能具有片面性,欢迎拍砖)

sql优化的方面:

           1、设计好的数据库结构

           2、分表与分区

           3、创建正确的索引

           4、减少访问的次数

           5、减少不必要的返回数据

           6、书写高效的sql


1、设计好的数据库结构

          好的数据库结构不同的业务有不同的看法,这里主要说一条,好的数据库设计应高保留重构的可能性。

2、分表与分区

          (1)、分表

                   分表就是将一张大表分成多张小表。

                   分表的作用是提高数据库的读写性能。

          (2)、分区

                   分区是将一张表分成多个区块。多个区块可以在不同磁盘上。

                   分区的作用是提高磁盘的读写性能。

3、创建正确的索引

           要创建正确的索引,有几点是值得注意的:

                    (1)、根据业务中调用频繁的sql的where语句建立索引。

                    (2)、索引的列的大小会对影响性能

                    (3)、联合索引中索引列的顺序是很关键的

                    (4)、索引并不是越多越好

4、减少访问的次数

            如果你需要对1000条数据进行处理,可能的情况下当然是一次取出来再处理,而不是取一条处理一条。减少了访问次数也就减少了磁盘I/O,在很多应用里面,磁盘I/O都是性能的瓶颈。

5、减少不必要的返回数据

            减少不必要的返回数据既指返回数据的条数,也指返回的数据字段。减少不必要的返回数据也就减少了网络传输时间和磁盘I/O。

6、书写高效的sql

            (1)、尽量不要使用IS NULL或者IS NOT NULL

                       因为索引是不索引空的,因此他们将不使用索引。

            (2)、尽量不要使用NOT

                       NOT也是不能使用索引的。

            (3)、用EXISTS替代IN、用NOT EXISTS替代NOT IN

                       IN 是把外表和内表作hash连接,而EXISTS是对外表作loop循环,每次loop循环再对内表进行查询。因此使用EXISTS的时候不要忘了在子查询中加上外表字段与子表字段的联合条件,否则效率同样会很低。IN与EXISTS同样与两张表的数据量有一定的关系。

                       NOT EXISTS使用全表扫描,效率很低。

            (4)、LIKE操作符

                       尽量不要使用'%www'的这种通配符前置的查询,因为不会使用索引。

            (5)、用UNION ALL 替代 UNION

                       UNION需要排序(mysql不会排序)删除重复,UNION ALL仅仅合并。

            (6)、尽量少用OR

            (7)、WHERE后面条件的顺序

                        前面的条件尽量减少数据,还有顺序也与索引有关。虽然新的数据库引擎会做一些优化,但是同样可以减少引擎优化的时间。



标题基于Python的汽车之家网站舆情分析系统研究AI更换标题第1章引言阐述汽车之家网站舆情分析的研究背景、意义、国内外研究现状、论文方法及创新点。1.1研究背景与意义说明汽车之家网站舆情分析对汽车行业及消费者的重要性。1.2国内外研究现状概述国内外在汽车舆情分析领域的研究进展与成果。1.3论文方法及创新点介绍本文采用的研究方法及相较于前人的创新之处。第2章相关理论总结和评述舆情分析、Python编程及网络爬虫相关理论。2.1舆情分析理论阐述舆情分析的基本概念、流程及关键技术。2.2Python编程基础介绍Python语言特点及其在数据分析中的应用。2.3网络爬虫技术说明网络爬虫的原理及在舆情数据收集中的应用。第3章系统设计详细描述基于Python的汽车之家网站舆情分析系统的设计方案。3.1系统架构设计给出系统的整体架构,包括数据收集、处理、分析及展示模块。3.2数据收集模块设计介绍如何利用网络爬虫技术收集汽车之家网站的舆情数据。3.3数据处理与分析模块设计阐述数据处理流程及舆情分析算法的选择与实现。第4章系统实现与测试介绍系统的实现过程及测试方法,确保系统稳定可靠。4.1系统实现环境列出系统实现所需的软件、硬件环境及开发工具。4.2系统实现过程详细描述系统各模块的实现步骤及代码实现细节。4.3系统测试方法介绍系统测试的方法、测试用例及测试结果分析。第5章研究结果与分析呈现系统运行结果,分析舆情数据,提出见解。5.1舆情数据可视化展示通过图表等形式展示舆情数据的分布、趋势等特征。5.2舆情分析结果解读对舆情分析结果进行解读,提出对汽车行业的见解。5.3对比方法分析将本系统与其他舆情分析系统进行对比,分析优劣。第6章结论与展望总结研究成果,提出未来研究方向。6.1研究结论概括本文的主要研究成果及对汽车之家网站舆情分析的贡献。6.2展望指出系统存在的不足及未来改进方向,展望舆情
评论 3
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值