Hive的行转列及列转行函数使用总结

1、laterval view 常 和 explode 一起使用用来进行行转列 (单个字段中有多个指定分隔符的字段)
explode 函数我称它为爆炸函数,可以将单个字段中有多个指定分隔符的字
1、比如以下这个 array 这个 例子

array
[10,20,30,40,50]
select explode(array) from tb

结果如下

array
10
20
30
40
50

2、炸开 map 的例子

idcnt
1[A,B,C]
2[D,E,F]
用函数  select  id,newcnt  from tb
                  lateral view explode (cnt) as newcnt ;

炸开之后的结果是

idcnt
1A
1B
1C
2D
2E
2F

备注:炸裂之后,要起别名

Hive中的行转列转行可以通过使用函数EXPLODE和LATERAL VIEW来实现。函数EXPLODE(col)用于将Hive的一中复杂的数组或者Map结构拆分成多行。LATERAL VIEW是用于和split、explode等函数一起使用的,可以将一展开成多或将多合并成一。 举个例子来说明,假设我们有一个表person_info,其中包含name、constellation和blood_type三。要将表中的name中的值拆分成多行,可以使用LATERAL VIEW和EXPLODE函数,具体的语句如下: SELECT t1.base, concat_ws('|', collect_set(t1.name)) name FROM (SELECT name, concat(constellation, ",", blood_type) base FROM person_info) t1 GROUP BY t1.base; 在上述查询中,通过LATERAL VIEW和EXPLODE函数,将name拆分成多行,然后使用concat_ws函数将拼接后的结果作为新的name。最后,通过GROUP BY对base进行分组。这样就实现了Hive中的行转列操作。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [hive转行案例](https://download.youkuaiyun.com/download/weixin_38581777/14037437)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* *3* [hive操作(行转列转行)](https://blog.youkuaiyun.com/aiduo3346/article/details/102085019)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值