hive中的lateral view 用法详解上篇

最新推荐文章于 2024-04-14 01:50:08 发布
最新推荐文章于 2024-04-14 01:50:08 发布
阅读量4.1k 收藏 4
点赞数
分类专栏： hive hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/AnneQiQi/article/details/51434365
版权

描述

lateral view用于和split, explode等UDTF一起使用，它能够将一行数据拆成多行数据，在此基础上可以对拆分后的数据进行聚合。lateral view首先为原始表的每行调用UDTF，UDTF会把一行拆分成一或者多行，lateral view再把结果组合，产生一个支持别名表的虚拟表。

通过Lateral view可以方便的将UDTF得到的行转列的结果集合在一起提供服务。
因为直接在SELECT使用UDTF会存在限制，即仅仅能包含单个字段，如下：
最低0.47元/天 解锁文章
Hive Lateral View 使用指南
SmartSi
03-17 3万+
1. 语法lateralView: LATERAL VIEW udtf(expression) tableAlias AS columnAlias (',' columnAlias)* fromClause: FROM baseTable (lateralView)*2. 描述Lateral View一般与用户自定义表生成函数（如explode()）结合使用。 如内置表生成函数中所述，UDTF为每
【Hive SQL】Hive Sql 列转行（lateral view 与 explode 、posexplode）详解
最新发布
qq_34446614的博客
06-21 1233
将hive某列一行中复杂的 array 或 map 结构拆分成多行（只能输入array或map）。通常，explode函数会与lateral view一起结合使用;
hive Lateral View语法
An342647823的专栏
03-03 5797
谢谢分享! 转载：http://yugouai.iteye.com/blog/1849902 个人理解有点类似行转列函数 Lateral View语法 Sql代码   lateralView: LATERAL VIEW udtf(expression) tableAlias AS columnAlias (',' columnAlias)*   from
hive lateral view语句
蚂蚁搬家
06-28 322
原文地址：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+LateralView# lateral view用于和split, explode等UDTF一起使用，它能够将一列数据拆成多行数据，在此基础上可以对拆分后的数据进行聚合。 一个简单的例子，假设我们有一张表pageAds，它有两列数据，第一列是pageid ...
Hive的Lateral View
lantian0802的专栏
06-17 1233
Lateral View用于把UDTF的行转列结果集合在一起提供服务。Lateral View可以返回多列数据，前提是UDTF注册的输出个数。 UDTF代码参考：hive/src/ql/src/java/org/apache/hadoop/hive/ql/udf/generic/GenericUDTFExplode.java 准备数据 CREATE TABLE t
hive lateral view
疯狂的矩阵
08-09 226
通过Lateral view可以方便的将UDTF得到的行转列的结果集合在一起提供服务。 因为直接在SELECT使用UDTF会存在限制，即仅仅能包含单个字段，如下： hive> select my_test(“abcef:aa”) as qq,my_test(“abcef:aa”) as ww from sunwg01; FAILED: Error in semantic analysis...
Hive之lateral view和explode的使用详解
KGC的博客
12-11 1356
关于explode函数 explode()其实就是一个UDTF——用户自定义表生成函数，而表生成函数官方定义是接受零个或多个输入，产生多列或多行的输出，就像explode的含义一样，生成爆炸一样的效果，将数据散开。 explode()一般接受Array类型的数组为入参，对数据中的元素进行迭代，再返回多行结果，比如： 返回结果为： 为了更好的切合实际运用和大家理解，我使用一个生产中的字段格式，该...
hive中的lateral view 用法详解下篇
AnneQiQi的博客
05-17 2681
例子 假设我们有一张表pageAds，它有两列数据，第一列是pageid string，第二列是adid_list，即用逗号分隔的广告ID集合： string pageid Array adid_list "front_page" [1, 2, 3] "contact_page" [3, 4, 5]
Hive中的lateral view 、explode、reflect、行转列、列转行、窗口函数与分析函数使用与区别详解
weixin_43230682的博客
08-19 6817
目录 一、使用explode函数将hive表中的Map和Array字段数据进行拆分 二、使用explode函数拆分json字符串数据 三、配合LATERAL VIEW使用 四、列转行 五、行转列 六、reflect函数 七、窗口函数与分析函数 1、创建hive表并加载数据 2、窗口函数 3、OVER从句 4、分析函数 5、增强的聚合Cube和Grouping和Rollup 6、使用cube和ROLLUP根据GROUP BY的维度的所有组合进行聚合。 一、使用explode函...
hive中的Lateral View
东杰书屋
07-02 1万+
通过Lateral view可以方便的将UDTF得到的行转列的结果集合在一起提供服务。 因为直接在SELECT使用UDTF会存在限制，即仅仅能包含单个字段，如下： hive> select my_test(“abcef:aa”) as qq,my_test(“abcef:aa”) as ww from sunwg01; FAILED: Error in semantic analysis
hive中的 lateral view(侧视图)
大锤
11-08 484
lateral view用于和split, explode等UDTF一起使用，它能够将一列数据拆成多行数据，在此基础上可以对拆分后的数据进行聚合。 例子 表pageAds。它有两个列：pageid、adid_list： pageId adid_list front_page [1, 2, 3] contact_page [3, 4, 5] SELECT pageid, adid FROM pageAds LATERAL VIEW explode(adid_list) adTable
Lateral View使用指南
weixin_30670151的博客
08-30 72
https://blog.youkuaiyun.com/sunnyyoona/article/details/62894761 select sum(pitem) from (select map_values(repay_principal) principal from dw.dw_xxx) t lateral view explode (t.principal) ptab as pitem...
Hive Lateral View
承缘丶
01-07 1576
https://cwiki.apache.org/confluence/display/Hive/LanguageManual+LateralView
LATERAL VIEW 使用总结
半吊子Kyle的博客
11-08 4964
LATERAL VIEW 使用总结使用案例一（单个）：split + explode + LATERAL VIEW The LATERAL VIEW clause is used in conjunction with generator functions such as EXPLODE, which will generate a virtual table containing one or more rows. LATERAL VIEW will apply the rows to each or
【hive】lateral view侧视图
atwdy的博客
04-14 3958
lateral view也叫侧视图，属于hive sql所特有的语法。用来实现类似标准sql中join的操作。join参与运算的往往是两个表，根据指定的关联字段进行横向连接。lateral view参与运算的是一张表，这张表里往往存在某个多值的字段，通过侧视图结合UDTF函数可以将这个多值字段拆分为粒度更小的值，每一个拆分出来的值都会作为新的字段和一条原记录进行拼接。类似于列转行操作，虽然严格意义上不算列转行，因为只是增加了行数，但并未减少列数，只是减少了列中所包含的字段个数。
Hive LATERAL VIEW 函数
止鱼
08-22 7734
函数简介lateral view 函数用于将数据一行转多列，一般与explode、split、collect_set函数一起使用基本使用 案例：现在有一张学生绩效表，记录了每个学生的所有科目的成绩, 需要查询所有拿了A的学生数 student_name(string) student_course(array[]) stuA [‘A’,’B’,’C’] stuB [‘A’,’
Hive Lateral view介绍
热门推荐
youziguo的专栏
09-30 2万+
Hive Lateral view使用介绍
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值