Hive explode lateral view 用法

最新推荐文章于 2024-12-24 23:37:15 发布

二十六画生的博客

最新推荐文章于 2024-12-24 23:37:15 发布

阅读量4.9k

点赞数

CC 4.0 BY-SA版权

本文链接：https://blog.youkuaiyun.com/u010002184/article/details/89642904

Hive Spark Hadoop MapReduce 专栏收录该内容

162 篇文章 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了Hive中的explode和lateral view用法，讲解了如何将字段内容转化为行显示。通过举例展示了explode处理array和string类型的场景，强调了explode必须与lateral view配合使用，并提到了map类型的explode注意事项。同时，指出了where条件的正确位置以及explode在特定字符串处理上的行为。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

类似于SqlServer的游标，把字段的内容转换成行显示。

lateral view UDTF(expression) tableAliasName as colAliasName

其中UDTF(expression)表示表生成函数说白了就是行转列的函数，即一行变为多行的函数，比如explode，当然也可以通过UDF自定义函数把一行转为多行，或者UDF返回Array,再通过explode炸成多行

tableAliasName表示表的别名,colAliasName表示表的列的别名

原理是:通过lateral view UDTF(expression)函数把一行转换为多行，会生成一个临时表，把这些数据放入这个临时表中，然后使用这个临时表和base表做inner join 使用的条件就是原始表的关系

建表语句：

create table sales_info_new(
sku_id string comment '商品id',
sku_name string comment '商品名称',
state_map map<string,string> comment '商品状态信息',
id_array array<string> comment '商品相关id列表'
)
partitioned by(
dt  string comment '年-月-日'
)
row format delimited