hive 多维分析 GROUPING SETS

最新推荐文章于 2024-11-03 00:13:40 发布
原创 最新推荐文章于 2024-11-03 00:13:40 发布 · 5.2w 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hive

GROUPINGSETS是一个SQL功能，用于在一个查询中执行多维分组分析。它允许组合不同的GROUP BY子句结果，例如统计每个部门人数、按性别统计人数以及部门和性别的组合统计，所有这些信息都整合在一个结果集中，简化了数据查询和分析的过程。

GROUPING SETS

1.含义：

在这里插入图片描述

GROUPING SETS 允许在一个数据结果集中包含多个 GROUP BY 结果集，即进行多维分析。 GROUPING SET 可由 UNION 连接的几个 GROUP BY 查询表达

2.示例：

testgrouping 表数据：
在这里插入图片描述

select  deptno,sex,count(id) from testgrouping group by deptno,sex grouping sets (deptno,sex,(deptno,sex));

统计 每个部门的人数；男女的人数；每个部门男女的人数，显示在一个结果集中：
在这里插入图片描述

实战 | Hive 如何使用 Grouping Sets
SmartSi
08-13 946
这篇文章描述了 SELECT 语句 GROUP BY 子句的增强聚合功能 GROUPING SETS。GROUPING SETS 子句是 SELECT 语句的 GROUP BY 子句的扩展。通过 GROUPING SETS 子句，你可采用多种方式对结果分组，而不必使用多个 SELECT 语句来实现这一目的。这就意味着，能够减少响应时间并提高性能。...
Hive多维分析函数——With cube、Grouping sets、With rollup
爱吃辣条的博客
07-28 1383
Hive多维分析函数——With cube、Grouping sets、With rollup
hive的多维数据分析
weixin_51104399的博客
06-19 1171
hive sql的多维分析实现 with cube,with rollup,grouping sets
Hive中的group set() 多维分析
好好学习天天向上
05-18 2473
文章目录grouping set() 多维分析 grouping set() 多维分析 将不同维度的GROUP BY结果进行UNION ALL操作。 UNION: A ∪ B 会自动去重 UNION ALL： A ∪ B 不会去重，显示所有 SELECT a,b,SUM(c) FROM table GROUP BY a,b GROUPING SETS((a,b),a,b,()) SELECT a,b,SUM(c) FROM table GROUP BY GROUPING SETS((a,b),a,b,
Hive/Presto中函数grouping sets用法详解（踩坑总结，看到赚到）
LdyLly的博客
04-24 2万+
本文详细记录了函数grouping sets使用时遇到的坑，基于Hive和Presto实现。
Hive 在多维统计分析中的应用 & 技巧总结
wisgood的专栏
12-07 9156
多维统计一般分两种，我们看看 Hive 中如何解决： 1、同属性的多维组合统计 （1）问题： 有如下数据，字段内容分别为：url, catePath0, catePath1, catePath2, unitparams https://cwiki.apache.org/confluence 0 1 8 {"store":{"fruit":[{"weight":1,"ty
sqlite查询乘以某列如果是null就换成_大数据之Hive group by with cube/rollup分组查询...
weixin_39901203的博客
11-29 413
group bysql 查询时，我们常将聚合函数和group by 结合起来对某一个或多个字段进行分组查询，例如： select addcode,count(distinct sbtid)uv from tb_hive_window group by addcode;+----------+-----+| addcode | uv |+----------+-----+| 0002 |...
HIVE多维分析函数：grouping sets、cube、rollup
weixin_46429290的博客
08-29 3865
这里with cube就等同于grouping sets ((department,name,age),(department,name),(department,age),(department),(name,age),(name),(age),())HIVE的多维分析函数，配合group by 使用，通常的group by只能对单维度的字段进行分析聚合操作，如果想要获取不同组合字段的聚合操作，就需要写多个group by 组合，HIVE提供了内置的函数用于上述这种多维分析。...
【Hive】多维函数 『grouping sets() | with cube | with rollup 』
渐渐的忘记，赶不上明天（读研ing，2024年毕业）
12-12 5333
1. 语法 2. 例子
万字长文详解Hive聚合函数 grouping sets、cube、rollup原理、语法、案例和优化
大模型大数据攻城狮的专栏
11-03 1050
这种灵活性使得GROUPING SETS在处理特定维度组合时更为高效。在性能方面，由于CUBE需要计算所有可能的维度组合，因此在处理大型数据集时可能会面临更高的计算开销。GROUPING SETS通过只计算指定的维度组合，通常能够提供更好的查询响应速度。另一个值得注意的区别是NULL值的处理。CUBE会。
统计男女生人数
11-15
汇编语言编写的男女生人数统计程序，由用户输入0/1来区分是男生或女士，最终将统计结果输出至屏幕，结果以16进制显示
Hive多维度分析MOLAP
流风雨情的博客
06-02 1561
SELECT t.type, t.status, count(1), grouping__id FROM ods_callcenter.sdm_call t WHERE dt = '20200601' GROUP BY t.type, t.status WITH CUBE --WITH ROLLUP --GROUPING SETS(t.status,t.type,(t.status,t.type))
hivesql多维分析，留存率，topN
科学的N次方
06-09 365
多维分析 CUBE 根据GROUP BY的维度的所有组合进行聚合。 SELECT month, day, COUNT(DISTINCT cookieid) AS uv, GROUPING__ID FROM user_login GROUP BY month,day WITH CUBE ORDER BY GROUPING__ID; month day uv GROUPING__ID NULL NULL 7
Hive中的多维分析函数
weixin_41875224的博客
08-17 3158
标题Hive中的多维分析函数 众所周知，Hive是一个OLAP数据库，拥有着很强大的数据分析能力。 但是当我们一张表的维度信息特别多，并且需要各种维度组合的统计分析结果时就很不方便。比如一张表有5个维度，所有的维度组合是2的5次方也就是32种，那也就意味着我们需要写32个查询的HQL解决我们的需求。同时不方便的点还存在于我们需要将32个HQL的查询结果写入到32张不同的表中，无形中给我们未来查询我们所需要的信息增加了一些难度。 本篇文章就是介绍Hive中非常好用的多维分析函数帮助我们解决以上两个痛点问题。
SQL—解决多维度随机组合查询场景：grouping sets函数
weixin_46010244的博客
08-02 5133
通过grouping sets函数，极大提高我们的开发效率，即使有更多维度组合的增加，只需要在grouping sets函数中新增即可，当然案例中姓名不具有实质性分组聚合意义，数据的展示问题需要做进一步处理，但相较于大量的union，grouping sets函数已经可以极大的对代码进行调优。
Hive之Grouping Sets函数[详解]
weixin_42326851的博客
07-26 1685
Hive之Grouping Sets函数[详解]
Hive分析窗口函数 GROUPING SETS、GROUPING__ID
菜如张学清的博客
06-26 5416
目录 1.概述 2.数据准备 2.1数据格式 2.2创表语句 3.GROUPING SETS和GROUPING__ID 3.1 GROUPING SETS例1 3.1.1查询语句 3.1.2等价于 3.1.3查询结果 3.1.4 结果说明 3.2GROUPING SETS 例2 3.2.1 查询语句 3.2.2 等价于 3.2.3 查询结果 3.3GROU...
Hive中的grouping set，cube，roll up
someInNeed的博客
10-15 852
GROUPING SETS GROUPING SETS作为GROUP BY的子句，允许开发人员在GROUP BY语句后面指定多个统计选项，可以简单理解为多条group by语句通过union all把查询结果聚合起来结合起来，下面是几个实例可以帮助我们了解， 以acorn_3g.test_xinyan_reg为例： [dp@YZSJHL19-87 xjob]$ hive -e "use acorn_3g;desc test_xinyan_reg;" user_id ...
Hive之grouping sets用法及grouping_id计算方法
热门推荐
HappyRocking的专栏
06-04 3万+
grouping sets 用法 在Hive中，会出现对同一个数据表进行不同粒度的汇总，这时可以有两种方案： 用多个sql，对不同粒度使用不同的 group by 方法。 用1个sql，使用 grouping sets 方法一次性得到所有粒度的汇总。 以测试数据表 tmp_student 为例: 1、生成测试数据 在 hive 环境中创建临时表： create table tmp.tmp_student ( name string, class int, sex string,
hive里 grouping sets用法
最新发布
03-19
Grouping Sets 是一种在 Hive 查询中简化多维分组操作的功能。通过使用 `GROUPING SETS`，可以在一条 SQL 语句中实现多个不同维度的聚合逻辑，从而减少多次执行查询的需求[^1]。 #### 语法结构 以下是 `GROUPING ...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

但行益事莫问前程

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值