HIVE SQL使用row_number()语法查询每种定义方式下，每种视频类型下对应的总播放时长

最新推荐文章于 2024-09-24 14:32:00 发布
最新推荐文章于 2024-09-24 14:32:00 发布
阅读量584 收藏 1
点赞数
CC 4.0 BY-SA版权
文章标签： hive mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/Foools/article/details/116533321

背景

当前有两张表如下：

在这里插入图片描述

id表示视频id，tag_type表示这种标签是谁定义的，content_tag表示的是视频类型。

在这里插入图片描述

vv表示视频播放量，id表示视频id。

需求1：查询每种视频类型下对应的总播放时长top3

SELECT  A.content_tag AS content_tag
       ,SUM(A.vv)     AS vv_sum
FROM
(
	SELECT  A.id     AS id
	       ,A.content_tag AS content_tag
	       ,SUM(B.vv)     AS vv
	FROM
	(
		SELECT  id
		       ,content_tag
		FROM label_table
	) A
	JOIN
	(
最低0.47元/天 解锁文章

200万优质内容无限畅学
Foools
关注
Hive SQL 窗口函数 `ROW_NUMBER() ` 案例分析
进一步有进一步的欢喜~
12-25 1225
本文深入探讨了 Hive SQL 中 ROW_NUMBER() 函数结合 PARTITION BY 和 ORDER BY 的强大功能，通过具体案例展示了如何在数据去重、排名计算和分页查询等场景中灵活应用这些技术。从员工薪资排名到最新交易记录的获取，再到月度销售冠军的计算。无论是初学者还是经验丰富的数据分析师，都能从中获得宝贵的技巧和灵感，提升数据分析效率。
HIVESQL中row_number使用
timothy_lau的博客
05-24 8483
row_number()在hive中是一个函数，必须带一个或者多个列参数，如row_number(col1, ....)，它的作用是按指定的列进行分组生成行序列，在row_number(a,b) 时，若两条记录的a，b列相同，则行序列+1，否则重新计数。 因为hive是基于mapreaduce的，必须保证row_number执行是在reduce中，并且row_number中使用的列中，列值相同的
HIVE sql: ROW_NUMBER()
09-09 1151
需求：hive里面对数据进行行处理，删除重复项 思路：1、根据指定的一个字段，将数据分类查询，并添加记录数做标记 2、保留下标为1的记录 拓展：1、去除多个字段重复项 2、保留下标最大的那条记录 步骤：假设有如下数据 employee（empid,deptid,salary) （1）表示根据deptid 分组，
[hive] 窗口函数 ROW_NUMBER()
言之。
10-27 1万+
在 Hive SQL 中，是一个用于生成行号的窗口函数。它可以为。以下是子句可选，用于指定，它将结果集划分为不同的分区。每个分区内的行都会有独立的行号计数，即行号从1开始重新计数。ORDER BY子句用于指定，它决定了如何对分区内的行进行排序。行号将根据指定的排序顺序进行分配。函数可以与其他窗口函数（如RANK()和）一起使用，以便对查询结果进行更复杂的分析和排序操作。在这个示例中，column1、column2 等是查询结果集中的列名，your_table_name 是包含这些列的表名。
hive sql练习_数据分析之hive学习（四）：面试题——场景输出（row_number）
weixin_39620099的博客
11-22 273
前言：以sql为基础，利用题目进行hive的语句练习，逐步体会sql与hive的不同之处。本次题目用到row_number()、collect_set()、concat_ws()。其中collect_set()、concat_ws讲解可参考https://www.jianshu.com/p/6ec508d1591a文末讲解row_number。题目：存在一份数据userid,changjing,i...
HiveSQL题——排序函数(row_number/rank/dense_rank)
爱吃辣条的博客
01-29 2974
HiveSQL题——排序函数(row_number/rank/dense_rank)
hive分析函数row_number()的应用
程老师的博客
07-27 703
row_number() over(partition by apptypeid order by pv desc) partition by：以什么分区（分组） order by：分区（分组）完以什么排序，是 spark-sql> with test1 as > (select 100024 as apptypeid,10 as pv > union all > select 100024 as apptypeid,20 as
【大数据Hive3.x数仓开发】Hive SQL窗口函数详解(rank(),dese_rank(), row_number(),LAG(),LEAD(),FIRST VALUE...))
锵锵锵锵蒋的博客
03-29 1018
主要对Hive中很重要的窗口函数进行总结，附带视频中的讲解实例。
【hive sql】ROW_NUMBER()
言之。
01-29 1万+
有一张表t1，表中有字段day和num，要取出每天num排名前10的所有数据。这个查询首先使用窗口函数 ROW_NUMBER() 对每天的数据进行排序，然后，在外部查询中，我们选择排名不超过 10 的记录。并为每一行分配一个排名。
【数据库】HIVE SQL几种排序函数（ROW_NUMBER&RANK&DENSE_RANK）
热门推荐
J小白的博客
08-21 2万+
最初用排序函数时，只会用row_number，后来在网上一看，才知道由于场景不同，是有不同的函数的。 作为一个总结，为以后的使用提供帮助。 一、ROW_NUMBER 　　对于排序，使用较为广泛的函数就是row_number。据网上说可以用来实现web程序的分页，小白不懂开发，所以不知道如何来分页。但是，在hive中，它的用途还是很广泛的。row_number和over一起配对使用，每一行记录...
hive中ROW_NUMBER()函数
Alex Dou的博客
04-23 2万+
ROW_NUMBER()函数 ROW_NUMBER() OVER(PARTITION BY COLUMN1 ORDER BY COLUMN2) 上述代码含义是首先根据COLUMN1进行结果集分组，结果集内部按照COLUMN2分组，输出结果是类似于双重分组的结果。 select id,dept,salary,ROW_NUMBER() OVER(PARTITION BY dept ORDER...
Hive表的分桶函数row_number()
tianxinyiru的博客
08-12 3126
Hive表的分桶函数row_number()详解
hive sql 实战案例-row_number等排序窗口函数的区别
jianai858的博客
05-08 258
分别使用row_number、rank和dense_rank的对成绩进行排名 1、row_number是行号，不会重复。 2、rank数据相同的，给出并列排名，但是会跳跃 3、dense_rank类似于rank，但不会跳跃。
查询某个用户浏览视频时长的前3个
泡^泡
10-31 342
查询某个用户浏览视频时长的前3个
Hive 排名函数ROW_NUMBER、RANK()、DENSE_RANK等功能介绍、对比和举例
龙大的博客
01-30 5052
例如，如果有 10 名学生，当前学生是按成绩排序后的第 3 名，那么前三名（包括当前学生）的学生数占总学生数的比例即为当前学生的累计分布百分比。如果两个学生的分数相同，他们将共享排名，例如都是排名1，下一个学生的排名将是3（假设只有两个学生分数相同）。说明：使用与 RANK() 相同的数据，DENSE_RANK() 函数也会为分数相同的学生分配相同的排名。第一名的学生百分比排名是 0，最后一名的百分比排名是 1，其他学生的百分比排名介于两者之间。在相同值的行之后的排名会跳过那些共享排名的行数。
hive窗口函数之排名函数row_number、rank和dense_rank
jianai858的博客
07-05 1万+
排名函数 排名函数主要有row_number、rank和dense_rank。 简单排名 row_number是行号，不会重复，rank数据相同的，给出并列排名，但是会跳跃，dense_rank类似于rank，但不会跳跃，通过下面的案例来看一下区别。 准备数据 drop table if exists test.test_zw; CREATE TABLE if not exists test.test_zw( name string COMMENT '姓名', score double commen
Hive ROW_NUMBER() 简介
goTsHgo的博客
09-24 1812
解析查询：Hive 将的 SQL 查询解析为抽象语法树（AST）。生成执行计划：查询计划中包含窗口函数的计算，分布在不同的任务和阶段。Map 阶段：数据读取并按分区分配给不同的 Reduce 任务。Reduce 阶段：数据按照指定的ORDER BY进行排序，并生成行号。返回结果：结果集带有唯一的行号。
HiveQL中ROW_NUMBER(),RANK()和DENSE_RANK()的区别和适用场景
zhangliushi的博客
04-15 443
文章目录一、ROW_NUMBER()（一）代码样例（二）取值逻辑及适用场景二、RANK()（一）代码样例（二）取值逻辑及适用场景三、DENSE_RANK()（一）代码样例（二）取值逻辑及适用场景 一、ROW_NUMBER() （一）代码样例 SELECT uid ,uname ,update_time ,ROW_NUMBER() OVER(PARTITION BY uid ORDER BY update_time DESC) AS rn FROM xxx WHERE pt_
HIVESQL中ROW_NUMBER() OVER语法以及示例---根据某字段值相同取另一字段最大值的所有行
沧海一粟
04-15 4257
数据如下： ID NAMEPIDCREATE_TIME ------------------------------ 1张三A2018-1-1 2李四A2017-1-1 3王五B2017-12-12 希望的查询结果（相同PID只取CREATE_TIME最大的行）： ID NAMEPIDCREATE_TIME --...
hivesql row_number() over()
最新发布
03-01
### HiveSQL 中 `ROW_NUMBER()` 函数的用法 `ROW_NUMBER()` 是窗口函数之一，在HiveSQL中用于为查询的结果集中的每一行分配唯一的行号。此功能通常与其他聚合操作一起使用，以便更好地控制数据排序和分组。 #### 基本语法 ```sql ROW_NUMBER() OVER ([partition_by_clause] order_by_clause) ``` - **PARTITION BY**: 可选项，定义分区逻辑，即在哪个层次上重新编号。 - **ORDER BY**: 必填项，规定如何对记录进行排序来决定行号顺序。 #### 实际应用案例 假设有一个名为 `ExamResult` 的表，其中包含学生考试的成绩信息： | StudentName | Subject | Marks | |-------------|-------------|-------| | Alice | Math | 90 | | Bob | English | 85 | | Charlie | Science | 78 | 为了给每位考生按照分数高低排名次，可以执行如下命令: ```sql SELECT StudentName, Subject, Marks, ROW_NUMBER() OVER (ORDER BY Marks DESC) AS Rank FROM ExamResult; ``` 这会返回带有新列 `Rank` 的结果集，表示基于成绩降序排列后的名次[^3]。 如果希望按科目对学生打分做单独排名，则可以在 `OVER` 子句里加入 `PARTITION BY` 来实现更细粒度的操作： ```sql SELECT StudentName, Subject, Marks, ROW_NUMBER() OVER(PARTITION BY Subject ORDER BY Marks DESC) AS Subject_Rank FROM ExamResult; ``` 上述语句将会针对不同学科分别计算排名，并且每门课程内部保持独立计数。 需要注意的是，虽然 `ROW_NUMBER()` 提供了强大的灵活性，但在处理大规模数据集时性能表现可能不如其他方法理想。对于非常大的表格来说，应该评估实际需求并考虑优化策略或替代方案[^4]。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值