快速找出一张表中不包含在另一张表的数据

最新推荐文章于 2025-01-27 09:41:19 发布
原创 最新推荐文章于 2025-01-27 09:41:19 发布 · 1.9k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql

表一
Id Number
101 5
102 30
103 10
表二
Id Number
101 5
102 30

当表数据量大的时候，用not in， not exist等效率会有很大问题
此时，用以下sql
select t1.Id, t1.Number, t2.Id, t2.Number
from Test1 t1 LEFT JOIN Test2 t2
on t1.Id = t2.Id
where t2.id is null
可以查询出想要的结果
Id Number Id1 Number1
103 10 （null） (null)

实际效率未验证，如有验证的童鞋麻烦回复一下

Pandas-根据数据表1中的字段a，筛选出数据表2中也包含字段a的数据
Python进阶专栏《爬虫实战进阶》，《Pyppeteer从入门到精通》原创作者
12-26 1151
假设现在有个数据分析的需求，如下：数据表1中有几十万条数据，数据表2中有几万条数据，两张数据表1和2有两个相同的字段phone，现在需要将数据表1和数据表2中，phone字段存在相同的行，保留下来，其余的行删除掉。数据表1如下：数据表2如下：对比分析两张表，数据表1中的phone字段，有整型也有字符串类型，但数据表2中的phone字段都是整型，使用数据表1中的字符串类型可以不用管，到时之间剔除掉即可。值得注意的是，数据表2中的phone字段是11位数，数据表1中的phone字段是8位数。
Excel筛选技巧：快速找出并移动符合条件的数据
nntxthml的博客
03-04 823
Excel的筛选功能是一个非常强大的工具，它可以帮助我们快速地从海量数据中提取出所需信息。通过本文的介绍，我们学会了如何使用筛选功能找出符合条件的数据，并将其移动到新表上。本文将详细介绍如何在Excel中使用筛选功能找出符合条件的数据，并将其移动到新表上。通过以上步骤，我们可以轻松地将筛选出的符合条件的数据移动到新表上。这样不仅可以保持原始数据的完整性，还方便我们对筛选出的数据进行进一步的分析和处理。有时候，我们不仅需要筛选出符合条件的数据，还需要将这些数据复制到新的工作表中以便进一步分析或处理。
excel如何查找一个表的数据在另外一个表是否存在
mrdzhu的博客
01-27 1万+
在你要修改的列标题那里点“修改”出现一个弹窗，在里面选“来源表”(Sheet2)“返回列”(民族)“查找列”（姓名）“被查找列”（姓名）然后点“确认修改”，这个操作就成功了。$B$2:$C$3,2,FALSE)，表示我们要查找Sheet2的B和C列，返回第2列，也就是C列的数据，查找的依据是我们的B列。比如“Sheet1”有“张三”、“李四”“王五”三个人的数据，“Sheet2”只有“张三”、“李四”的数据。我们通过修改“Sheet1”的“民族”或者其他空的列，修改为“Sheet2”的某一列。
excel 查找一个表的数据在另一个表中是否存在
热门推荐
shaoyunzhe的专栏
05-24 1万+
Sub test() Rem MsgBox ("AAAAA") Dim pos, pos1, tmp, total1, total2, tmpStr, tmpStr1, col, sheetR sheetR = 2 Rem 获取Sheet1的行数 total1 = Sheet1.UsedRange.Rows.Count Rem 获取Sheet1的列数，后面把不满足的条目复制到She...
查存在一个表而不在另一个表中的数据
A9925的专栏
07-13 1306
http://blog.youkuaiyun.com/u012732259/article/details/42215119 A、B两表，找出ID字段中，存在A表，但是不存在B表的数据。A表总共13w数据，去重后大约3W条数据，B表有2W条数据，且B表的ID字段有索引。 方法一 　　使用 not in ,容易理解,效率低  ~执行时间为：1.395秒~ 1 select distinct A.
mysql 查询一张表在另一张表中不存在的数据
to_real的博客
04-19 7011
mysql数据库中一张表与另一张表有相同的一个字段，需要过滤出 表t_camera 中在 t_sys_role_camera表中不存在的数据，利用关键字 NOT EXISTS来实现。 同理可以使用EXISTS 关键字来查询一张表在另一张表中存在的数据。 SELECT * FROM t_camera t WHERE NOT EXISTS ( SELECT * FROM t_sys_role_camera...
数据库：MySQL查询一个数据表中不含另一个数据表的内容
weixin_46001736的博客
02-27 693
数据库：MySQL查询一个数据表中不含另一个数据表的内容
Oracle中用一张表的字段更新另一张表的字段
12-14
在Oracle数据库中，当需要将一个表的字段值更新到另一个表时，通常可以使用`MERGE INTO`语句来实现。`MERGE INTO`是一个非常强大的SQL操作，它结合了`INSERT`、`UPDATE`和`DELETE`的功能，允许你在匹配条件的基础上...
sql同一张表对比两列数据日期大于30天语句.docx
最新发布
07-13
例如，假设有一张名为`orders`的表，其中包含订单的下单日期`order_date`和发货日期`shipping_date`，可以构造如下查询语句来找出所有订单和发货日期相差超过30天的记录： ```sql SELECT order_id, order_date, ...
Oracle中以一张表字段更新另一张表字段
07-02
在SQL Server中，通常会先将测试库表（假设为表A）的数据导出到Excel，然后在开发库中创建一个结构与表A相同但只包含两个字段的表B。接着利用PL SQL的导入功能将数据导入到表B中。在Oracle中，可以使用MERGE INTO...
从一个表中查找另一表没有的记录
zengjz888的专栏
07-26 874
[quote] 如果要从一个表中查询另一个表不存在的记录，这样的情况从不同数据的角度去分析，有些数据库提供了差集的函数，有些没有要写子查询。 1、DB2、postgreSQL差集函数except select deptno from emp except select deptno from dept 2、Oracle的差集函数minus select deptno f...
mysql 查询在一张表不在另外一张表的记录
weixin_42082545的博客
12-12 3211
(1)左向外联接的结果集包括 LEFT OUTER 子句中指定的左表的所有行，而不仅仅是联接列所匹配的行。如果左表的某行在右表中没有匹配行，则在相关联的结果集行中右表的所有选择列表列均为空值(null)。如：select * from B where (select count(1) as num from A where A.ID = B.ID) = 0；如：select A.ID from A left join B on A.ID=B.ID where B.ID is null；
查询A表中不存在于B表的数据
qq_43559922的博客
06-04 721
总结试验了四种方式，通过EXPLANIN查看的结果，四种查询方式用到的索引是一样的，所以实机测试了一下查询效率并做记录。环境配置：A和B表20万数据 表字段100+ 匹配结果为61901条 服务器 4核 16G。
TP5左关联查询想要右表为空的数据 where写法
weixin_38748068的博客
11-02 748
TP5查询字段值为NULL $where['c.nickname'] = ['EXP','IS NULL'];
查询一张表中某字段不在另外一张表的记录
zj511025的专栏
09-05 2920
当查询A表中某字段不在B表中的记录时，采用下面的语句，效率比较高select data_guid from (select data_guid from adam_entity_datas where table_name = GKGYHHW) minus select data_guid from gkgyhhw这里用了oracle的一个运算符minus,它表示返回在第一个查询结
TP5中模型使用join关联查询时，出现找不到表的情况
Hey_JC的博客
01-27 1163
问题场景： tp的大版本为5.0 模型之间是一对一的join形式关联，不附加筛选条件的情况下查询是正常的，但是一旦附加了时间范围查询就报错了，报：表不存在错误 问题排查： 经过排查发现是因为使用了tp的between time导致的。 源码分析： 经过分析tp5的框架源码，发现具体原因出在：thinkphp/library/think/db/Builder.php的parseDateTime方法中，parseDateTime单纯靠list($table, $key) = explode('.', $key)
在关联表中查询不关联的数据
weixin_49723367的博客
08-09 756
table1是数据量多的一方table2 少的一方。table1是数据量多的一方table2 少的一方。1.在关联表中查询不关联的数据。1.删除关联表中不关联的数据。
二十三、ThinkPHP6_模型的数据查询
汪学友的博客
08-05 2001
一、数据查询 find() 方法，通过主键（id）查询数据，如果不存在返回Null $user = UserModel::find(129); return json($user); where() 方法进行条件筛选查询数据 $user = UserModel::where('name','李白')->find(); findOrEmpty() 方法，数据不存在返回空模型，然后可以使用 isEmpty() 方法判断，是否为空模型 $user = UserModel::findOrEmp
php 两表关联查询,thinkphp中的多表关联查询的实例详解
weixin_31910545的博客
03-09 620
thinkphp中的多表关联查询的实例详解在进行后端管理系统的编程的时候一般会使用框架来进行页面的快速搭建，我最近使用比较多的就是thinkphp框架，thinkphp框架的应用其实就是把前端和后端进行分割管理，前端用户登录查询系统放在thinkphp中的home文件夹中进行管理，后端管理系统放在thinkphp中的admin文件夹中进行管理。对了，在使用thinkphp框架的时候是是要用到mvc...
达梦数据库多表连接查询怎么根据另一张表中不存在的数据过滤查询数据
03-15
<think>好的，我现在需要解决用户关于达梦数据库多表连接查询的问题，特别是如何根据另一张表中不存在的数据来过滤查询数据。首先，我需要回忆一下用户之前的提问，之前他们询问了ROLLUP的用法，现在转向多表连接中的过滤，这可能意味着他们在处理数据时需要结合不同表的数据进行筛选。 用户的问题是如何根据另一张表中不存在的数据来过滤数据。这让我想到SQL中的几种方法，比如使用NOT EXISTS、LEFT JOIN + IS NULL，或者EXCEPT运算符。不过，达梦数据库作为国产数据库，可能对这些语法的支持情况需要确认。比如，有些数据库可能不支持EXCEPT，或者有不同的关键字。 接下来，我需要考虑用户可能的实际应用场景。比如，他们可能需要找出在表A中存在但在表B中不存在的记录，比如查找未订购产品的客户，或者未完成订单的条目。这种情况下，通常使用反连接（anti-join）的方法。 首先，我应该解释基本思路，然后给出具体的语法示例。比如，使用NOT EXISTS子查询，或者LEFT JOIN后检查关联表的键是否为NULL。这两种方法是比较常见的解决方案，适用于大多数SQL数据库，包括达梦。 然后，我需要考虑达梦数据库的特性，是否有特别的优化或者不同的语法。例如，达梦是否支持EXCEPT关键字，或者是否有其他更高效的方法。根据之前的了解，达梦兼容标准SQL，所以NOT EXISTS和LEFT JOIN应该都适用，但可能需要验证。 另外，用户可能需要性能方面的建议，比如索引的使用，或者哪种方法在数据量大时更高效。通常，NOT EXISTS和LEFT JOIN的性能取决于具体的数据分布和索引情况，但一般来说，如果子查询的表有合适的索引，NOT EXISTS可能更高效。 然后，我需要考虑如何组织回答，确保结构清晰。可能分为几种方法，每种方法的语法示例、使用场景、注意事项，以及性能建议。同时，要给出实际的例子，比如两个表的结构，查询的具体示例，这样用户更容易理解。 还需要注意用户的身份，可能是开发人员或者数据分析师，他们需要具体的代码示例和解释，所以应该提供可直接使用的SQL语句，并注释说明关键点。 最后，要检查是否有遗漏的情况，比如如何处理多列关联的情况，或者当关联条件复杂时的处理方式。例如，使用复合键进行连接时，如何确保正确性。 总结一下，我需要分步骤解释不同的方法，给出示例，比较它们的优缺点，并提供性能优化建议，确保用户能够根据实际情况选择最合适的方法。</think>在达梦数据库中，**通过多表连接查询另一张表不存在的数据**，核心方法是使用**反连接(Anti-Join)**技术。以下是具体实现方式与最佳实践： --- ### **一、基础实现方案** #### **1. 使用`NOT EXISTS`子查询** ```sql SELECT t1.* FROM 主表 t1 WHERE NOT EXISTS ( SELECT 1 FROM 过滤表 t2 WHERE t1.关联字段 = t2.关联字段 ); ``` **特点**： - 执行效率较高（推荐优先使用） - 自动处理`NULL`值 - 可扩展复杂条件 **示例**：查询没有订单的客户 ```sql SELECT c.customer_id, c.name FROM customers c WHERE NOT EXISTS ( SELECT 1 FROM orders o WHERE c.customer_id = o.customer_id ); ``` --- #### **2. 使用`LEFT JOIN`+`IS NULL`** ```sql SELECT t1.* FROM 主表 t1 LEFT JOIN 过滤表 t2 ON t1.关联字段 = t2.关联字段 WHERE t2.关联字段 IS NULL; ``` **特点**： - 直观易理解 - 需确保关联字段非空 - 适合简单关联条件 **示例**：查找未分配部门的员工 ```sql SELECT e.emp_id, e.emp_name FROM employees e LEFT JOIN departments d ON e.dept_id = d.dept_id WHERE d.dept_id IS NULL; ``` --- ### **二、进阶处理技巧** #### **1. 复合条件过滤** 当需要多字段关联时： ```sql -- NOT EXISTS 版 SELECT * FROM products p WHERE NOT EXISTS ( SELECT 1 FROM inventory i WHERE p.product_id = i.product_id AND p.warehouse = i.location ); -- LEFT JOIN 版 SELECT p.* FROM products p LEFT JOIN inventory i ON p.product_id = i.product_id AND p.warehouse = i.location WHERE i.product_id IS NULL; ``` #### **2. 排除多表数据** 需同时排除多个表的数据： ```sql SELECT * FROM tableA a WHERE NOT EXISTS ( SELECT 1 FROM tableB b WHERE a.id = b.a_id ) AND NOT EXISTS ( SELECT 1 FROM tableC c WHERE a.id = c.a_id ); ``` --- ### **三、性能优化建议** 1. **索引策略** - 为关联字段创建索引（主表和过滤表都需要） ```sql CREATE INDEX idx_t1_key ON 主表(关联字段); CREATE INDEX idx_t2_key ON 过滤表(关联字段); ``` 2. **执行计划分析** 使用`EXPLAIN`查看执行计划： ```sql EXPLAIN SELECT ... -- 替换为实际查询语句 ``` 3. **分页处理** 大数据量时添加分页限制： ```sql SELECT * FROM (...原查询...) LIMIT 1000 OFFSET 0; ``` --- ### **四、特殊场景处理** #### **1. 存在NULL值的处理** 当关联字段可能为`NULL`时： ```sql SELECT t1.* FROM table1 t1 WHERE NOT EXISTS ( SELECT 1 FROM table2 t2 WHERE (t1.key = t2.key OR (t1.key IS NULL AND t2.key IS NULL)) ); ``` #### **2. 排除部分匹配数据** 需要排除满足特定条件的关联数据： ```sql SELECT * FROM orders o WHERE NOT EXISTS ( SELECT 1 FROM payments p WHERE o.order_id = p.order_id AND p.status = 'completed' -- 排除已完成支付的订单 ); ``` --- ### **五、方案对比** | **方法** | 优势 | 注意事项 | |------------------|-----------------------------|-----------------------------| | `NOT EXISTS` | 自动处理NULL，执行效率高 | 子查询中避免复杂逻辑 | | `LEFT JOIN` | 直观易读，方便扩展结果字段 | 需确保关联字段非空 | | `EXCEPT`运算符 | 语法简洁 | 达梦数据库需确认版本支持(DM8+) | --- ### **六、实测案例** #### **数据准备** ```sql -- 创建测试表 CREATE TABLE students ( stu_id INT PRIMARY KEY, name VARCHAR(20) ); CREATE TABLE course_records ( record_id INT, stu_id INT, course VARCHAR(20) ); -- 插入数据 INSERT INTO students VALUES (1, '张三'), (2, '李四'), (3, '王五'); INSERT INTO course_records VALUES (101, 1, '数学'), (102, 1, '英语'), (103, 3, '物理'); ``` #### **查询未选课学生** ```sql -- 方法1: NOT EXISTS SELECT s.* FROM students s WHERE NOT EXISTS ( SELECT 1 FROM course_records cr WHERE s.stu_id = cr.stu_id ); -- 方法2: LEFT JOIN SELECT s.* FROM students s LEFT JOIN course_records cr ON s.stu_id = cr.stu_id WHERE cr.stu_id IS NULL; ``` **查询结果**： | stu_id | name | |--------|------| | 2 | 李四 | --- **关键注意事项**： 1. 达梦数据库版本需支持相关语法（建议使用DM8及以上） 2. 大数据量查询时建议添加`LIMIT`分页 3. 定期分析表统计信息：`DBMS_STATS.GATHER_TABLE_STATS('模式名','表名')`
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值