SQL数据分析实战:好用的窗口函数

本文深入讲解了SQL中的窗口函数,包括排序函数如RANK()、DENSE_RANK()和ROW_NUMBER(),分布函数PERCENT_RANK()和CUME_DIST(),前后函数LAG()和LEAD(),首尾函数FIRST_VALUE()和LAST_VALUE(),以及聚合函数的应用。通过实例展示了如何在窗口中动态计算聚合函数值,并提供了在实际工作中的应用场景。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

今天给大家分享下关于SQL的窗口函数基础。

目录:

1. 窗口函数是什么

2. 排序函数

3. 分布函数

4. 前后函数

5. 首尾函数

6. 聚合函数

81d1a830e7e3539131937512e19998e0.png

1. 窗口函数是什么

ba548d532b6d91fd9198b711377d102c.png

6f189f00a1fba099ad477accd577868c.png

6c4f5a3e4a60d51aebc43bd1c05f1b2c.png

窗口函数,也叫OLAP函数(Online Anallytical Processing,联机分析处理),可以对数据库数据进行实时分析处理。

mysql8.0版本开始支持窗口函数了,今天我们就是以mysql为例来介绍这个窗口函数的。

窗口其实是指一个记录集合,而窗口函数则是在满足某些条件的记录集合上执行指定的函数方法。在日常工作中比较常见的例子比如求学生的单科成绩排名求前三名等等之类的。

窗口函数的基本语法如下:

<窗口函数> OVER (PARTITION BY <用于分组的列名> ORDER BY <用于排序的列名>)

像一些聚合函数如 SUM()AVG()COUNT()MAX()MIN()等等,以及专用的窗口函数RANK()DENSE_RANK()ROW_NUMBER()等等。

bd8bb10e76b9f047bc835ecbca908b87.png

2. 排序函数

ab229daea4d5e2e97a918de43c47a521.png

7cb3675f2cf95388f59703705b20c609.png

e37bc4ec4925cba4708ab01fa7cc1b0e.png

就是进行排序操作,显示排名

RANK()DENSE_RANK()ROW_NUMBER()

我们先创建数据表如下:

DROP TABLE
IF
 EXISTS 成绩单;
CREATE TABLE 成绩单 ( 学号 VARCHAR ( 8 ), 姓名 VARCHAR ( 8 ), 科目 VARCHAR ( 8 ), 得分 INT ) ENGINE = INNODB DEFAULT CHARSET = utf8;
INSERT INTO 成绩单
VALUES
 ('1000', '小明', '语文' ,112 ),
 ('1000', '小明', '数学' ,120 ),
 ('1000', '小明', '英语' ,92 ),
 ('1001', '云朵', '语文' ,112 ), 
 ('1001', '云朵', '数学' ,118 ),
 ('1001', '云朵', '英语' ,99 ), 
 ('1002', '库里', '语文' ,101 ),
 ('1002', '库里', '数学' ,111 ),
 ('1002', '库里', '英语' ,90 ),
 ('1003', '才子', '语文' ,112 ), 
 ('1003', '才子', '数学' ,120 ),
 ('1003', '才子', '英语' ,112 ), 
 ('1004', '小华', '语文' ,112 ),
 ('1004', '小华', '数学' ,112 ),
 ('1004', '小华', '英语' ,112 ),
 ('1005', '强森', '语文' ,92 ), 
 ('1005', '强森', '数学' ,120 ),
 ('1005', '强森', '英语' ,92 );

这是一张成绩表,分别是学号、姓名、科目与得分。

fe86ef4128c8856338d04f27554ed107.png
成绩表

面对上面这份数据,我们要求各科目学生们得分排名,就可以用到排序函数。

比如RANK()

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS RANK_排名
FROM
 成绩单

这个操作是按照科目进行分组,然后按照得分进行排序(DESC是由大到小)。

结果如下:

2939c4747ba4a02e57a47bab944c7b44.png
RANK()

可以看到,对于同样得分而言,RANK()下的名次是同样的,而且名次中存在间隙(不一定连续)。

我们来看RANK()DENSE_RANK()ROW_NUMBER()三者的差异:

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS RANK_排名 ,
 DENSE_RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS DENSE_RANK_排名 ,
 ROW_NUMBER() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS ROW_NUMBER_排名
FROM
 成绩单

结果对比如下:

4da79435a134603b116f066c39442154.png
差异对比

可以看到这三者的作用如下:

函数说明
ROW_NUMBER为表中的每一行分配一个序号,可以指定分组(也可以不指定)及排序字段(连续且不重复)
DENSE_RANK根据排序字段为每个分组中的每一行分配一个序号。排名值相同时,序号相同,序号中没有间隙(1,1,1,2,3这种)
RANK根据排序字段为每个分组中的每一行分配一个序号。排名值相同时,序号相同,但序号中存在间隙(1,1,1,4,5这种)

我们要获取各科目排名第一的学生及得分,就可以再加个条件判断即可,需要注意这里用到了子查询。

SELECT
 * 
FROM
 ( SELECT *, DENSE_RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS DENSE_RANK_排名 FROM 成绩单 ) a 
WHERE
 DENSE_RANK_排名 = 1;

查询结果如下:

30bd05a81cf14402a2c937215bf01a42.png
DENSE_RANK_排名第一

另外还有个NTILE(n)将分区中的有序数据分为n个等级,记录等级数

比如按照学号分区得分排序进行分2个等级

SELECT
 *,
 NTILE(2) OVER ( PARTITION BY 学号 ORDER BY 得分 DESC ) AS NTILE_
FROM
 成绩单

查询结果如下:

8be3dcd95356cc293fa0a4e7d430a1fe.png
NTILE(2)

NTILE(n)在数据分析中应用较多,比如由于数据量大,需要将数据平均分配到n个并行的进程分别计算,此时就可以用NTILE(n)对数据进行分组(由于记录数不一定被n整除,所以数据不一定完全平均),然后将不同桶号的数据再分配。

b098d8cdb2b68e0194426534194d0bb2.png

3. 分布函数

6d2b5ceed97193d07fa200f454c706e2.png

5db6a42cdb59a9967dcb514645a8773b.png

8fb43ccc33a0f35df92d818d09d1097b.png

分布函数有两个PERCENT_RANK()CUME_DIST()

**PERCENT_RANK()**的用途是每行按照公式(rank-1) / (rows-1)进行计算。其中,rankRANK()函数产生的序号,rows为当前窗口的记录总行数。

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS RANK_排名 ,
 PERCENT_RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS PERCENT_RANK_
FROM
 成绩单

查询结果如下:

506638565caa1b6a9f381f04760d5052.png
PERCENT_RANK()

CUME_DIST()的用途是分组内小于、等于当前rank值的行数 / 分组内总行数。

查询小于等于当前成绩的比例

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS RANK_排名 ,
 CUME_DIST() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS CUME_DIST_
FROM
 成绩单

查询结果如下:

7a861a377bcd0e90d08161f465c7ddd2.png
CUME_DIST()

可以看到,数学科目中有0.5也就是50%的朋友得分120,超过66.66%的学生成绩在118分及以上。

de690a219333781101c42e5601823e0d.png

4. 前后函数

3359953dd73fa35a5c73a569ece2d645.png

0e12010e749ae5c130e5f46b0aefea46.png

16762a76b5fad7d877d152ab226ae88a.png

查询当前行指定字段往前后N行数据,LAG() 和 LEAD()

前N行LAG(expr[,N[,default]]),比如我们看各科目同学每个人往前3名的同学得分。

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS RANK_排名 ,
 LAG(得分, 3) OVER ( PARTITION BY 科目 ORDER BY 得分 DESC) AS LAG_
FROM
 成绩单

查询结果如下:

2755ca025ceccbfe10de038566b93530.png
LAG(得分, 3)

可以看到,各科目前三行都是NULL空值,这是因为前三行不存在它们往前3行的值。rank 4的前3是rank 1,对应得分是120。

这个可以用于进行一些诸如环比的情况,在这里我们可以计算当前同学与前1名同学得分差值,操作如下:

SELECT
 *,
 LAG_ - 得分 
FROM
 (
 SELECT
  *,
  RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS RANK_排名,
  LAG(得分, 1 ) OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS LAG_ 
 FROM
 成绩单 
 ) a

查询结果如下:

730bd4397e5bb8c7779e671b9971a28d.png

LEAD(expr[,N[,default]])就是往后N名了,这里就不再赘述。

2e936db302def9042db116ac8e263e2b.png

5. 首尾函数

8e61196757f266817b25b9434c1a2203.png

8382179884feada44c7c15877dad6dc6.png

66f959364d10743276aea2b9b1fdd504.png

查询指定字段第一或最后的数据FIRST_VALUE(expr)LAST_VALUE(expr)

查询各科目得分第1的分值

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS RANK_排名,
 FIRST_VALUE(得分) OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS FIRST_VALUE_得分 
FROM
 成绩单

查询结果如下:

784252b6e3d40d00f2701160d29a7bfd.png
FIRST_VALUE(得分)

我们可以计算各个同学与第1名的差距(上面前后函数部分介绍了和前1名的差距):

SELECT
 *,
 FIRST_VALUE_得分 - 得分 
FROM
 (
 SELECT
  *,
  RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS RANK_排名,
  FIRST_VALUE(得分) OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS FIRST_VALUE_得分 
 FROM
  成绩单 
 ) a

查询结果如下:

9f1511bf4fe83745d8befd795b65ee29.png

LAST_VALUE(expr)就是最后1名了,这里不再赘述。

另外还有NTH_VALUE(expr, n)查询指定字段有序行的第n的值

比如查询排名第4的数据

SELECT
 *,
 RANK() OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS RANK_排名,
 NTH_VALUE(得分,4) OVER ( PARTITION BY 科目 ORDER BY 得分 DESC ) AS NTH_VALUE_得分 
FROM
 成绩单

查询结果如下:

9077aa48307c6bf7d48ea325b8410d83.png
NTH_VALUE(得分,4)

aa39cd08b2910f08a83988c3a3806559.png

6. 聚合函数

a8f40f837d2ec21b1d7dac15944d09d2.png

5d978dbadd533fa8fea7478bd868f7f9.png

db28ca4425fefa1f41143306f15aa3e6.png

在窗口中每条记录动态地应用聚合函数(SUM()AVG()MAX()MIN()COUNT()),可以动态计算在指定的窗口内的各种聚合函数值。

所以,这里我们构造一个带有时间字段的数据表。

DROP TABLE
IF
 EXISTS 语文成绩单;
CREATE TABLE 语文成绩单 ( 学号 VARCHAR ( 8 ), 姓名 VARCHAR ( 8 ), 时间  DATE, 得分 INT ) ENGINE = INNODB DEFAULT CHARSET = utf8;
INSERT INTO 语文成绩单
VALUES
 ('1000', '小明', '2022-01-02' ,102 ),
 ('1001', '云朵', '2022-01-04' ,112 ), 
 ('1002', '库里', '2022-01-07' ,101 ),
 ('1003', '才子', '2022-01-07' ,118 ),  
 ('1004', '小华', '2022-01-08' ,112 ),
 ('1005', '强森', '2022-01-09' ,92 );

这是一张语文成绩表,分别是学号、姓名、时间与得分。

2452f8cf961bc3996737c8d6a03a53dd.png
语文成绩表

比如,我们要查询在截止每个时间语文最高分,可以这样操作:

SELECT
 *,
 MAX(得分) OVER ( ORDER BY 时间 ) AS MAX_ 
FROM
 语文成绩单

查询结果如下:

2af75fafc9839d1e31a885947f61e25a.png
MAX(得分)

以上就是本次的基础介绍,日常工作的的实际操作应该会更加复杂,不过抽丝剥茧我们总会发现复杂都是由很多基础拼接而成,打好基础就可以变得很强!

以上。

2db8b6d296655dd162051fe35a50df9d.gif

●是时候说再见了!Excel
●品牌知名度分析
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值