INTERSECT 与 EXCEPT 集合运算验收:重复行、NULL 和排序边界
来源:17golang原创
时间:2026-08-22 19:58:40 287浏览 收藏
报表上线后,产品要同时拉出“本月有购买行为”和“参与过试用活动”的客户,另一个统计列表还要筛掉已经完成退订的用户。以前常用的写法是叠好几层JOIN,之后还要花额外精力处理重复行;MySQL 8.4 可以直接用 INTERSECT 取两个集合的交集,用 EXCEPT 取差集,整个验收的重点根本不是会写这两个关键字,而是它自带的去重逻辑、列对齐规则和最后排序的边界行为。
要点速览
- 不额外写修饰词时,
INTERSECT和EXCEPT默认按DISTINCT处理。 ALL会原样保留重复行,左右两侧的查询块必须列数完全一致,列类型也得符合集合运算的协调规则。INTERSECT的优先级高于UNION和EXCEPT,混写的时候必须用括号把业务意图明确标出来。- 排序要等外层集合运算全部跑完再统一做
ORDER BY;如果要在子查询块内部做排序和限制,必须用括号把对应块单独包起来。
先用客户集合还原问题场景
先建两张测试小表,特意在表里放重复的 customer_id,再把地区字段的部分值设为 NULL。这组测试数据就能覆盖线上平时最容易漏掉的几个特殊场景。
CREATE TEMPORARY TABLE sales_audience (
customer_id INT,
region VARCHAR(16)
);
INSERT INTO sales_audience VALUES
(101, '华东'), (101, '华东'), (102, NULL), (103, '华南');
CREATE TEMPORARY TABLE sales_trial (
customer_id INT,
region VARCHAR(16)
);
INSERT INTO sales_trial VALUES
(101, '华东'), (102, NULL), (102, NULL), (104, '华北');
如果业务层面只关心客户编号,就只把 customer_id 这一列查出来就行;要是把 region 也放到查询结果里,这列就会变成集合行的比对部分。这个很小的改动,直接会让最终的去重结果完全不一样。

INTERSECT:重复行最终保留几次
最精简的写法如下,两边查询都只返回一列,结果里只会留下两边都出现过的客户编号,而且默认自动去重:
SELECT customer_id FROM sales_audience
INTERSECT
SELECT customer_id FROM sales_trial;
最终结果里 101 和 102 各只出现一次。就算 101 在左表里重复了两次,102 在右表里重复了两次,省略修饰词的写法也完全等价于写了 INTERSECT DISTINCT。
如果业务确实需要保留多重集合的语义,改成下面的写法就可以:
SELECT customer_id FROM sales_audience
INTERSECT ALL
SELECT customer_id FROM sales_trial;
可以简单理解成,每个值最终保留的行数是它在左右两个集合里出现次数的较小值:101 最终保留 1 行,102 在左侧集合里只出现 1 次,所以最终也只保留 1 行。不要只看返回的行数就判断语句写得对不对,必须同步核对重复数据的预期结果。
EXCEPT:差集不能直接等价于“按状态过滤”
要筛选出“产生过购买行为但从来没参加过试用”的客户,可以直接这么写:
SELECT customer_id FROM sales_audience
EXCEPT
SELECT customer_id FROM sales_trial;
这套测试数据跑出来的结果是 103。默认的 EXCEPT DISTINCT 会先把左侧的重复值按完整集合行做去重;换成 EXCEPT ALL 的话会按两边出现的次数做减法,只有左侧比右侧多出来的部分才会被留下来。
这里有个很容易踩的边界:差集只会比对两个查询块实际返回的行,它不会自动识别你写的“退订”“有效期”“最新状态”这些背后的业务含义。要是客户状态都存在同一张客户表里,你得先明确好状态的时间快照,再把稳定的数据集投影出来,别指望靠一条差集语句掩盖数据口径不一致的问题。

列数、类型与 NULL:提前定好接口契约
集合运算两侧的查询必须返回相同数量的列。下面这种写法直接就会报错:
SELECT customer_id, region FROM sales_audience
INTERSECT
SELECT customer_id FROM sales_trial;
列的对应关系是按查询返回的位置计算的,不是按列名匹配。更稳妥的做法是让两边的 SELECT 列表列顺序完全一致,代码评审的时候把这条当成一个小型的接口契约来核对。
列类型会按集合运算的规则自动协调,但别把隐式转换当成正常的设计方案。编号类字段两侧统一成整数类型,文本类字段统一字符集和长度;有必要的时候显式用 CAST 做转换,后续数据库升级或者切换连接字符集的时候,能更快发现潜在问题。
NULL 本身也是集合行的合法值。相同位置上的 NULL,做集合去重和比对的表现不能拿平时常用的“NULL = NULL 代表未知”的逻辑去反推,直接在你线上用的目标 MySQL 版本里跑一组最小验收数据,把预期返回的行数写到测试用例里最稳妥。
混用 UNION、INTERSECT、EXCEPT 必须显式加括号
MySQL 8.4 里,INTERSECT 的优先级高于 UNION 和 EXCEPT。举个例子:
SELECT customer_id FROM sales_audience
EXCEPT
SELECT customer_id FROM sales_trial
INTERSECT
SELECT customer_id FROM vip_customer;
很多开发会下意识按从左到右的顺序理解执行逻辑,数据库实际却会先算后面两块的交集。实际项目里建议直接显式加括号把计算顺序写死,旁边还可以随手加注释说明“先取试用用户和VIP用户的交集,再从购买集合里排除这部分人”,让SQL的写法和业务逻辑的表述完全对得上。
最终的排序操作要放在整个集合表达式的最外层:
(SELECT customer_id FROM sales_audience
EXCEPT
SELECT customer_id FROM sales_trial)
ORDER BY customer_id
LIMIT 50;
要是某个子查询块需要先排序或者先做行数限制,也要用括号把这个查询块单独包起来,不然你测到的可能只是语法改写后生成的另一条完全不同的查询。
上线前用四组结果做回归验收
| 验收项 | 输入 | 应关注的结果 |
|---|---|---|
| 默认去重 | 带重复 customer_id 的测试数据 | 确认表现等价于加了 DISTINCT 的效果 |
| ALL 语义 | 左右两侧重复次数不一致 | 交集取两侧次数的较小值,差集保留左侧多出的次数 |
| 列契约校验 | 修改列数、类型、排列顺序 | 抛出错误或者结果变更都要被测试用例捕获到 |
| 表达式边界 | 混合使用多类集合运算符、排序、LIMIT | 靠括号和外层 ORDER BY 把业务意图完全固定 |
生产环境跑查询还要评估数据量。集合运算解决的是SQL语义表达更清晰的问题,不代表性能一定比写JOIN更快;先拿 EXPLAIN 检查查询的扫描范围和中间结果大小,再用线上真实规模的客户数据做对照验证。把返回结果数、重复行数、NULL 行的匹配情况和排序的稳定性都纳入回归检查,比只确认“SQL能正常跑完”要靠谱得多。
常见问题
INTERSECT 默认是 DISTINCT 还是 ALL?
默认是 DISTINCT。只有明确写出 INTERSECT ALL 才会保留全部重复行。
EXCEPT 能替代所有 NOT EXISTS 场景吗?
不能。EXCEPT 更适合两个独立结果集合取差集的场景;如果右侧条件要关联左侧的多列、需要带出额外关联状态或者要保留左表的明细字段,用 NOT EXISTS 或者 JOIN 写出来的逻辑往往可读性更好。
集合运算两边可以用不一样的列名吗?
可以,匹配规则是按位置而不是按列名,但列数必须完全相同,列的排列顺序也要符合业务比对的要求。
为什么我在子查询块里写了 ORDER BY,结果返回的顺序还是不对?
集合运算生成的整体结果要在外层做排序才会生效。查询块内部写的 ORDER BY/LIMIT 只有在用括号把这个查询块单独包住的时候,才会代表你要对局部结果做排序加限制的逻辑。
把 INTERSECT 和 EXCEPT 当成有明确输入输出契约的集合接口,先把投影列固定下来,再依次验收 DISTINCT、ALL、NULL、运算符优先级和排序的边界,后续这部分SQL就不会因为依赖了某个隐式规则,平白无故跑出不符合预期的结果。
-
374 收藏
-
398 收藏
-
499 收藏
-
384 收藏
-
184 收藏
-
170 收藏
-
145 收藏
-
数据库 · MySQL | 1天前 | MySQL · ip地址 · 数据库设计 · IPv6 · 索引查询 · IPv6 MySQL 8.4 INET6_ATON INET6_NTOA VARBINARY(16)356 收藏
-
数据库 · MySQL | 1天前 | MySQL · utf8mb4 · 字符集 · 排序规则 · 数据库迁移 · 字符集 排序规则 utf8mb4 MySQL 8.4 SET NAMES 连接字符集423 收藏
-
338 收藏
-
数据库 · MySQL | 1天前 | MySQL · 权限 · 性能排查 · mysql SHOW PROCESSLIST performance_schema.threads PROCESS权限 会话诊断399 收藏
-
数据库 · MySQL | 1天前 | MySQL · InnoDB · purge · 长事务 · 数据库诊断 · Purge Lag 长事务 InnoDB history list length information_schema.innodb_trx sys.innodb_lock_waits106 收藏
-
数据库 · MySQL | 1天前 | MySQL · JSON · 数据库开发 · 数据清洗 · SQL 查询 · JSON_TABLE MySQL 8.4 JSON_TABLE NESTED PATH ON EMPTY ON ERROR JSON 数组展开390 收藏
-
数据库 · MySQL | 1天前 | MySQL · InnoDB · 备份恢复 · mysqldump · 线上运维 · innodb mysqldump 逻辑备份 MySQL 8.4 single-transaction435 收藏
-
数据库 · MySQL | 2天前 | MySQL · CPU · 数据库 · 性能治理 · 资源组 · MySQL 8.4 MySQL资源组 RESOURCE_GROUP RESOURCE_GROUP_ADMIN CPU限流191 收藏
-
数据库 · MySQL | 2天前 | MySQL · 数据库 · 性能监控 · performance_schema · 慢 SQL · MySQL performance_schema events_statements_history_long DIGEST 异常 SQL 语句历史352 收藏
-
数据库 · MySQL | 2天前 | MySQL · 事务 · InnoDB · 只读 · 数据库权限 · innodb 临时表 MySQL 事务只读 READ ONLY transaction_read_only335 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习