Hive开窗函数中加Order by 和不加Order by的区别,over partition by与group by的区别

本文详细介绍了Hive中的over()函数在排序和聚合函数中的应用,以及与GROUP BY的区别。over()函数在排序函数如row_number()、rank()等时仅在窗口内排序;而在聚合函数如max()、min()时,不仅排序,还进行窗口内的聚合。通过实例展示了不同用法对结果的影响,并解释了PARTITION BY与GROUP BY在数据行数变化上的差异。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

使用环境为hive,over()开窗函数前分排序函数和聚合函数两种。

当为排序函数,如row_number(),rank()等时,over中的order by只起到窗口内排序作用。

当为聚合函数,如max,min,count等时,over中的order by不仅起到窗口内排序,还起到窗口内从当前行到之前所有行的聚合(多了一个范围)。

如:select id, dept, salary, min(salary) over(partition by dept) min_sal from dept; – ①

select id, dept, salary, min(salary) over(partition by dept order by id) min_sal from dept; – ②

上面①②中的min_salary字段的值会不一样,原因是②中使用order by后,等同于 min(salary) over(partition by dept order by userid range between unbounded preceding and current row ),当然可以在order by后使用框架子句,即rows,range等,如果没有写框架子句,就默认在窗口范围中当前行到之前所有行的数据进行统计。

over partition by与group by的区别:

group by会改变数据的行数,返回分组之后的数据结果。
而partition是数据原本多少行,分区之后仍有多少行。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值