1、数据库的优化
mysql数据库的常见瓶颈是:CPU和IO的瓶颈。
CPU在饱和的时候发生在数据库内存或磁盘读取数据的时候。
分布在网络上,当查询量过大,瓶颈就会出现在网络上。
优化方案
mysql优化大体可以分为三部分:索引的优化,sql语句的优化、表的优化。
1、1 索引优化
简单来说,加速查询最好的方法就是索引。
索引的目的,是提高查询效率。
索引类型
- 普通索引:最基本的索引,没有任何限制。
- 唯一索引:与前面普通索引类似,不同的是:索引列的值必须唯一,但允许有空值。如果是组合索引,则列值的组合必须唯一。
- 组合索引:多个字段上创建的索引,只有在查询条件中使用创建索引的字段,索引才会被使用。
- 主键索引:一个表只能有一个主键,不允许空值。建表的同时创建主键索引。
- 全文索引:主要是查找文本关键字。
索引优化
- 只要列中含有NULL值,就最好不要在此比例上设置索引,复合索引有null值,此列在使用时不会使用索引。
- 尽量使用短索引,如果可以,应该制定一个前缀长度。
- 对于经常在where子句使用的列,最好设置索引,这样会加快查找速度。
- 对于有多个列where或者order by子句的,应该建立复合索引
- 对于like语句,以%或者-开头不会使用索引,以%结尾会使用索引
- 尽量不要在列上进行运算
- 尽量不要使用not in和<>操作。
1、2 SQL慢查询优化
首先我们需要了解什么是慢查询:慢查询是指在数据库中执行时间超过预设阈值的查询操作。通常,数据库管理员会设置一个时间阈值(如1秒或0.5秒),当查询执行时间超过该阈值时,就会被记录为慢查询。这类查询会消耗大量资源,可能导致数据库性能下降,甚至影响其他查询的正常运行。
如何捕获低效SQL
- slow_query_log 这个参数设置为ON,可以捕获执行时间超过一定数值的SQL语句。
- one_query_time 当SQL语句执行超过此数值时,就会记录到日志,建议设置为1
- slow_query_log_file 记录日志的文件名
- log_queries_not_using_indexs 这个参数设置为ON,可以捕获所有未使用索引的SQL语句,尽管这个SQL语句可能执行挺快。
慢查询优化的基本步骤
- 先运行看看是否真的慢,注意设置SQL_NO_CACHE
- where条件查表,锁定最小返回记录表。
- explain查看执行计划,是否与1预期一致
- order by limit 形式的sql语句让排序表优先查
- 了解业务方使用场景
- 加索引参照索引规制
- 观察结果,不符合预期继续从1开始分析
优化原则
- 查询时,能不要就不要,尽量写全字段名
- 大部分情况连接效率远大于子查询
- 多使用explain和profile分析查询语句
- 查看慢查询日志,找出执行时间长的sql语句优化
- 多表连接时,尽量小表驱动大表,即小表join大表
- 在千万级分页时使用limit
- 对于经常查询使用的,可以开启缓存
数据库表优化
- 表的字段尽可能使用NOT NULL
- 字段的长度固定表查询更快
- 把数据库的大表按时间或者一些标志分为小表
- 将表拆分
数据表的拆分:主要就是垂直拆分和水平拆分。
- 水平拆分:将记录散表到不同的表中,各表的结构完全相同,每次从分表中查询,提高效率
- 垂直拆分:将表中大字段单独拆分到另一个表,形成一对一关系。
总之MYSQL的优化主要在于:索引优化、sql语句优化、表优化
在高并发网络环境下,除了优化数据库外,还会涉及到分布式缓存,CDN,数据库读写分离等高并发优化技术。

被折叠的 条评论
为什么被折叠?



