HIVE中ROW_NUMBER()函数的讲解

本文详细介绍了ROW_NUMBER()函数的应用,特别是如何通过该函数实现数据的分组排序及去重操作。通过具体示例展示了如何根据部门(dept)对员工薪资(salary)进行排序,并在每个部门中获取唯一的记录。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

ROW_NUMBER()函数

ROW_NUMBER() OVER(PARTITION BY COLUMN1 ORDER BY COLUMN2)
  • 1上述代码含义是首先根据COLUMN1进行结果集分组,结果集内部按照COLUMN2分组,输出结果是类似于双重分组的结果。
select id,dept,salary,ROW_NUMBER() OVER(PARTITION BY dept ORDER BY salary)
  • 1执行结果为:

id dept salary row_number
1 a 10000 1
2 a 9000 2
3 a 8000 3
4 b 12000 1
5 b 11000 2


其中结果会首先按照dept分组升序排序,然后按照salary降序进行排序,而后面的row_number则是在每个dept分组中的排序号。

注:我们可以使用ROW_NUMBER()函数进行去重,使用上述两个列名首先对其进行双重排序,最后在这个hql语句外层再添加一个判断row_number的值为1的条件语句获取分组排序后的第一条数据进行获取,即达到了去重的效果。

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值