Task05:SQL高级处理

本文深入探讨SQL中的窗口函数,包括RANK()、DENSE_RANK()和ROW_NUMBER(),以及如何在聚合函数上使用。通过示例展示了窗口函数在分组、排序和计算移动平均等方面的应用,并解释了框架(frame)的概念。同时,提到了窗口函数只能在SELECT子句中使用,且OVER子句的ORDERBY不影响最终排序。最后,提供了涉及窗口函数的SQL练习题。

学习目标:

Task05:SQL高级处理


学习产出:

窗口函数(OLAP函数)

<窗口函数> OVER ([PARTITION BY <列名>]
                     ORDER BY <排序用列名>) 

[]中的内容可以省略掉
PARTITON BY是用来分组
ORDER BY用于字段规则排序

几个专用窗口函数

  • RANK 如果有并列,则跳过之后的位次。如有三个并列第一名则:1,1,1,4,
  • DENSE_RANK 如果有并列,但是不会跳过之后的位次。如有三个并列第一名则:1,1,1,2,
  • ROW_NUMBER 赋予唯一的连续位次,有 3 条记录排在第 1 位时:1 位、2 位、3 位、4 位
    给出个实例
SELECT  product_name
       ,product_type
       ,sale_price
       ,RANK() OVER (ORDER BY sale_price) AS ranking
       ,DENSE_RANK() OVER (ORDER BY sale_price) AS dense_ranking
       ,ROW_NUMBER() OVER (ORDER BY sale_price) AS row_num
  FROM product

在这里插入图片描述

聚合函数在窗口函数上的使用
SELECT  product_id
       ,product_name
       ,sale_price
       ,SUM(sale_price) OVER (ORDER BY product_id) AS current_sum
       ,AVG(sale_price) OVER (ORDER BY product_id) AS current_avg  
  FROM product;  

在这里插入图片描述

窗口函数的的应用 - 计算移动平均

指定更加详细的汇总范围。该汇总范围称为框架(frame)。

<窗口函数> OVER (ORDER BY <排序用列名>
                 ROWS n PRECEDING )  
                 
<窗口函数> OVER (ORDER BY <排序用列名>
                 ROWS BETWEEN n PRECEDING AND n FOLLOWING)

PRECEDING(“之前”), 将框架指定为 “截止到之前 n 行”,加上自身行

FOLLOWING(“之后”), 将框架指定为 “截止到之后 n 行”,加上自身行

BETWEEN 1 PRECEDING AND 1 FOLLOWING,将框架指定为 “之前1行” + “之后1行” + “自身”

原则上,窗口函数只能在SELECT子句中使用。
窗口函数OVER 中的ORDER BY 子句并不会影响最终结果的排序。其只是用来决定窗口函数按何种顺序计算。

运算符

  • ROLLUP计算合计及小计
SELECT  product_type
       ,regist_date
       ,SUM(sale_price) AS sum_price
  FROM product
 GROUP BY product_type, regist_date WITH ROLLUP  

在这里插入图片描述

练习题

在这里插入图片描述
2.

SELECT product_name
	  ,regist_date
	  ,sale_price
	  ,SUM(sale_price) OVER(partition by regist_date order by regist_date)
from product;

在这里插入图片描述

  1. ① 窗口函数不指定PARTITION BY的效果是什么?
    将当前表格看成一个大窗口进行计算
    ② 为什么说窗口函数只能在SELECT子句中使用?实际上,在ORDER BY 子句使用系统并不会报错。
    窗口函数是对where或者group by子句处理后的结果进行操作
[ERROR] 2025-05-14 11:47:46.797 +0800 - execute sql error: SQL task prepareStatementAndBind error [ERROR] 2025-05-14 11:47:46.798 +0800 - sql task error org.apache.dolphinscheduler.plugin.task.api.TaskException: SQL task prepareStatementAndBind error at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.prepareStatementAndBind(SqlTask.java:377) at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.executeUpdate(SqlTask.java:311) at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.executeFuncAndSql(SqlTask.java:210) at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.handle(SqlTask.java:161) at org.apache.dolphinscheduler.server.worker.runner.DefaultWorkerDelayTaskExecuteRunnable.executeTask(DefaultWorkerDelayTaskExecuteRunnable.java:49) at org.apache.dolphinscheduler.server.worker.runner.WorkerTaskExecuteRunnable.run(WorkerTaskExecuteRunnable.java:174) at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511) at com.google.common.util.concurrent.TrustedListenableFutureTask$TrustedFutureInterruptibleTask.runInterruptibly(TrustedListenableFutureTask.java:131) at com.google.common.util.concurrent.InterruptibleTask.run(InterruptibleTask.java:74) at com.google.common.util.concurrent.TrustedListenableFutureTask.run(TrustedListenableFutureTask.java:82) at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149) at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624) at java.lang.Thread.run(Thread.java:748) Caused by: java.lang.NullPointerException: null at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.prepareStatementAndBind(SqlTask.java:363) ... 12 common frames omitted [ERROR] 2025-05-14 11:47:46.798 +0800 - Task execute failed, due to meet an exception org.apache.dolphinscheduler.plugin.task.api.TaskException: Execute sql task failed at org.apache.dolphinscheduler.plugin.task.sql.SqlTask.handle(SqlTask.java:168) at org.apache.dolphinscheduler.server.worker.runner.DefaultWor
最新发布
05-16
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值