MYSQL-SQL优化_临时表

SQL分页查询优化：distinct、临时表与联合索引策略,
最新推荐文章于 2025-09-12 12:52:11 发布
原创 最新推荐文章于 2025-09-12 12:52:11 发布 · 194 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #sql #数据库

文章探讨了在SQL分页查询中使用distinct去重可能导致临时表的问题，提出通过groupby替换distinct并利用create_date和id的联合唯一索引，以避免临时表排序，提高性能。

现状： 分页查询sql中使用了distinct去重，并使用order by create_date，以及limit
使用distinct：产生了临时表
在这里插入图片描述
优化思路： 去掉distinct ,使用group by 替代，依然使用了临时表
在这里插入图片描述
由于主键本身就确保了唯一，那么创建时间和id的联合唯一索引，这样就可以避免使用临时表在内存中排序， UNIQUE KEY idx_create_date_id (create_date,id) USING BTREE
在这里插入图片描述
避免产生了临时索引

码写人生
关注
mysql-5.7.38-linux-glibc2.12-x86_64.tar.gz
06-11
7. **存储引擎**：MySQL 5.7.38引入了多种存储引擎，如InnoDB（支持事务处理，行级锁定），MyISAM（读写速度快，不支持事务），以及Memory（数据存于内存，适合临时表）。InnoDB通常是默认引擎，因为它提供了更高的...
mysql -参数thread_cache_size优化方法 小结
12-15
此外，定期检查并优化SQL语句，避免全表扫描，合理使用索引，以及对数据进行分区等都是提升MySQL性能的有效手段。 在日常运维中，我们还应注意监控MySQL服务器的线程状态，通过`SHOW GLOBAL STATUS LIKE 'Thread%'`...
简单聊聊MySQL临时表（TEMPORARY TABLE）
是小宗啊？的博客
04-08 2949
写了个略，突然想起小时候，课本习题的答案好多都是略，还有的老师让把最后的答案整个撕下来上交，那些当时觉得难熬的日子，如今看来是那般无忧无虑。当学生，除了没钱什么都有，当员工，除了温饱，什么都没有。
mysql临时表_mysql关于临时表的总结
weixin_39968722的博客
01-18 228
mysql临时表分为两种，一种是使用create temporary table创建的，称为为外部临时表(本文不加说明的情况下，临时表默认指的是外部临时表)，一种是因union、order by、group by、distinct等语句产生的，称为内部临时表。1、创建临时表语法create temporary table table_name (column1 type,column1 type,...
MySQL的临时表：内部实现机制、内存与磁盘使用，以及如何优化避免生成？
最新发布
weixin_41455464的博客
09-12 900
MySQL 临时表是查询执行过程中不可避免的组成部分，但通过合理的优化策略，我们可以减少临时表的生成，提高数据库性能。大家好，今天我们来深入探讨 MySQL 临时表，一个在查询执行过程中经常被创建和销毁，但又容易被忽视的关键组成部分。我们将从临时表的内部实现机制入手，分析其内存与磁盘的使用情况，最后探讨如何优化查询，避免不必要的临时表生成，从而提升数据库性能。如果一个查询需要创建一个大于 16MB 的临时表，MySQL 会自动将其转换为磁盘临时表。表示创建的临时表的总数（包括内存临时表和磁盘临时表）。
单字段查询,用另一个字段进行排序,用distinct关键字去重和不去重的查询结果对比分析
qq_45927587的博客
12-22 2050
distinct关键字和orderby联合使用的硬性要求,以及orderby相关知识,临时表相关知识
mysql 避免临时表_避免临时表，SQL语句性能提升100倍
weixin_42600407的博客
01-19 693
【问题现象】线上mysql数据库爆出一个慢查询，DBA观察发现，查询时服务器IO飙升，IO占用率达到100%， 执行时间长达7s左右。SQL语句如下：SELECT DISTINCT g.*, cp.name AS cp_name, c.name AS category_name, t.name AS type_name FROM gm_game g LEFT JOIN gm_cp cp ON c...
精选资源
mysql-5.6.44-linux-glibc2.12-x86_64.tar.gz
02-19
9. **临时表空间**：在InnoDB中支持临时表，使得处理大量临时数据的复杂查询更为高效。 10. **增强的复制选项**：如GTID（全局事务标识符）复制，提供了更加安全和易于管理的复制策略。 安装MySQL 5.6.44涉及以下...
精选资源
mysql-overview_rev5.json
04-25
- **Memory**：数据存储在内存中，适合临时表。 - **Merge**：合并多个MyISAM表，用于空间优化。 五、MySQL的备份与恢复 MySQL提供了多种备份策略，如使用`mysqldump`工具进行逻辑备份，或者利用二进制日志进行增量...
精选资源
mysql-8.0.26-el7-x86_64.tar.gz 源码包
09-23
MySQL支持多种存储引擎，如InnoDB（默认引擎，提供事务处理、行级锁定和外键约束）、MyISAM（快速读取，但不支持事务）、Memory（数据存储在内存中，适用于临时表）等。InnoDB在MySQL 8.0中进行了大量优化，包括更...
mysql 避免临时表_SQL查询优化以避免临时表
weixin_39663729的博客
01-19 351
The Table:CREATE TABLE `T1` (`UserId` int(10) unsigned NOT NULL,`FriendUserId` int(10) unsigned NOT NULL,`IsDisplayed` tinyint(1) unsigned NOT NULL,`Created` datetime NOT NULL,KEY `FriendUserId` (`Fri...
MySQL 如何优化DISTINCT问题描述
weixin_43183496的博客
03-21 970
然后再运行DISTINCT查询，这样数据库就可以更快地找到并消除重复的product_id值。
Sql Distinct 知多少
iteye_8029的博客
03-22 154
在表中，可能会包含重复值。这并不成问题，不过，有时您也许希望仅仅列出不同（distinct）的值。 语法：SELECT DISTINCT 列名称 FROM 表名称 结果如下： 如果要筛选出所有的HaveID，使用如下的语句 语法：SELECT HaveID FROM tempConsult 结果如下： 如果要筛选出不同的haveID，使用如下语句...
mysql中的distinct的用法
web13170611647的博客
08-23 1万+
该情况由于索引不能满足整个去重分组的过程，所以需要用到临时表，mysql首先需要将满足条件的数据放到临时表中，然后在临时表中对该部分数据进行分组，然后从临时表中每个分组的数据中去一条数据，在临时表中进行分组的过程中不会对数据进行排序。在mysql中，distinct关键字的主要作用就是对数据库表中一个或者多个字段重复的数据进行过滤，只返回其中的一条数据给用户，distinct只可以在select中使用。该情况mysql直接通过操作索引对满足条件的数据进行分组，然后从分组后的每组数据中去一条数据。
MySQL 内部 临时表 图文 详解
猫头虎技术团队：授渔优于赠鱼，兴趣引领智慧，探索之乐尤显珍贵。商务合作+：Libin9iOak ，万粉变现+：优快云WF，猫头虎承诺每年免费为100名C站创作者做账号流量诊断服务！全网搜：猫头虎技术团队，点击文章底部名片或直接私信我一切皆可谈，快找虎哥！
05-26 8349
MySQL 内部 临时表 图文 详解 文章目录MySQL 内部 临时表 图文 详解1. 准备工作2. 哪些场景会用到临时表？3. 临时表用哪种存储引擎？4. 内存临时表变磁盘临时表5. 写入哪些字段到临时表？6. 为哪些字段建立索引？6.1 group by6.2 distinct6.3 hash 字段7. 内部临时表使用情况统计8. 小结总结 MySQL 临时表分为两种：外部临时表、内部临时表。用户通过 CREATE TEMPORARY TABLE 创建的是外部临时表。SQL 语句执行过程中 MySQL
MySQL 临时表的原理以及优化手段
终生学习践行者
08-27 3786
MySQL的临时表的原理以及优化手段。
distinct 使用
热门推荐
qq_36302506的博客
08-16 1万+
MySQL distinct 使用 1.基本用法 distinct用于筛选唯一值，可以作用于单个列或者多个列。作用于单个列时有以下几个注意点： distinct必须放在所有指定字段名之前，不允许 select <name1>, distinct <name2> from ... distinct作用于多个列，结果按照指定的多个列的值得组合进行筛选 2.和count一起用 可以使用 select count(distinct name) from .... 因为count是
distinct sql用法_SQL优化终于干掉了“distinct”
weixin_39722375的博客
11-22 1033
一、优化目的在我提交了代码的时候，架构师给我指出我这个sql这样写会有问题。因为在分库分表的时候，是不支持子查询的。所以需要把多表的子查询的sql结构进行优化。二、优化之前的sql长这样是不是挺恐怖的；（此处为了脱敏，我把相关的sql关键词都给打码掉了）这个sql的执行步骤如下：1、查询出来d表中的某个id字段包含多个id值的所有的数据（因为此表是1-n的关系，所以需要去重，仅需要拿到不重复的id...
tdsql-mysql 临时表 sql语法
07-08
在TDSQL-MySQL中，创建和使用临时表的SQL语法与标准MySQL语法保持高度一致。用户可以使用`CREATE TEMPORARY TABLE`语句来创建一个临时表，该表仅在当前会话中可见，并在会话结束时自动删除。 ### 创建临时表 创建临时表的基本语法如下： ```sql CREATE TEMPORARY TABLE temp_table_name ( column1 datatype, column2 datatype, ... ); ``` 例如，假设有一个员工表`employees`，我们想要创建一个临时表来存储部门ID为10的所有员工的信息： ```sql CREATE TEMPORARY TABLE temp_employees ( employee_id INT, first_name VARCHAR(50), last_name VARCHAR(50), department_id INT, salary DECIMAL(10, 2) ); ``` ### 插入数据到临时表 插入数据到临时表的方式与普通表相同，可以使用`INSERT INTO ... SELECT`语句来填充临时表： ```sql INSERT INTO temp_employees (employee_id, first_name, last_name, department_id, salary) SELECT employee_id, first_name, last_name, department_id, salary FROM employees WHERE department_id = 10; ``` 这种方式非常适合从多个数据源获取数据集，并将其集中在一个临时表中进行后续处理[^3]。 ### 查询和分析数据 一旦数据被插入到临时表中，就可以像操作普通表一样对其进行查询和分析。例如，计算临时表中所有员工的平均工资： ```sql SELECT AVG(salary) AS average_salary FROM temp_employees; ``` ### 删除临时表 虽然临时表会在会话结束时自动删除，但也可以手动删除它们以释放资源： ```sql DROP TEMPORARY TABLE IF EXISTS temp_employees; ``` 需要注意的是，在某些情况下可能需要显式地管理临时表的生命周期，特别是在长时间运行的应用程序或脚本中。 ### 注意事项 - **作用域**：临时表只对当前会话可见，其他会话无法访问。 - **性能考虑**：尽管临时表提供了便利，但在大数据量的情况下应谨慎使用，因为这可能会导致内存不足的问题。 - **兼容性**：TDSQL-MySQL支持绝大多数标准MySQL语法，包括临时表的操作[^4]。 通过上述步骤，可以在TDSQL-MySQL环境中高效地利用临时表来简化复杂的查询逻辑并提高开发效率。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值