Hive中的map类型及其操作

本文介绍了如何在 Hive 中使用 Map 数据类型,包括创建表、常用 Map 函数、判断键是否存在及 Map 的转换技巧等。并通过实例展示了字符串转 Map 类型的方法及 Map 中的数据筛选。
部署运行你感兴趣的模型镜像

–创建表,并定义map类型

create table employee(id string, perf map<string, string>)     
ROW FORMAT DELIMITED                                        
FIELDS TERMINATED BY '	'                              
COLLECTION ITEMS TERMINATED BY ','    --map形式key:value,key:value
MAP KEYS TERMINATED BY ':';  --map形式key:value,key:value

Map中的方法:

  1. size(Map)函数:可得map的长度。返回值类型:int

  2. map_keys(Map)函数:可得map中所有的key; 返回值类型: array

  3. map_values(Map)函数:可得map中所有的value; 返回值类型: array

  4. 判断map中是否包含某个key值:array_contains(map_keys(k_v),‘A’)或者k_V[“A”] is not null

  5. 在k-v对中,若value有多个值的情况,如 {‘k1’:‘01,02,03’} ,如果要用 ‘k1’ 中 '02’作为过滤条件,则语句如下:(这里用到split来处理)select * from t where split(t.params['k1'],',')[1] ;

  6. 如果过滤条件为:k2的值必须为’45’开头,则语句如下:
    (这里用到substr方法来处理,这里注明一下,1和2分别表示起始位置和长度)

    select * from t where substr(t.params[‘k2’],1,2) = ‘45’;

案例:
–字符串转map类型
–1.判断key是否在map中存在

select mm.*, array_contains(map_keys(k_v),'A') from (
select t.w,str_to_map(CONCAT_WS('&',COLLECT_SET(concat(M,":",mc))),"&",":" ) k_V  --1.拼接字串为 key:value&key:value;2.将拼接的字串转成map类型
FROM (
SELECT 1 W,'A' M,"中" mc
UNION ALL
SELECT 1 W,'B' M,"国" mc
UNION ALL
SELECT 2 W,'C' M,"好" mc
) T  group by t.w
) mm 
;

结果:
在这里插入图片描述

–2.判断key是否在map中存在

select mm.* from (
select t.w,str_to_map(CONCAT_WS('&',COLLECT_SET(concat(M,":",mc))),"&",":") k_V
FROM (
SELECT 1 W,'A' M,"中" mc
UNION ALL
SELECT 1 W,'B' M,"国" mc
UNION ALL
SELECT 2 W,'C' M,"好" mc
) T  group by t.w 
) mm where k_V["A"] is not null
;

结果:
在这里插入图片描述

–3.map的单行转多行

select mm.*, y.n_m,y.n_mc from (
select t.w,str_to_map(CONCAT_WS('&',COLLECT_SET(concat(M,":",mc))),"&",":") k_V
FROM (
SELECT 1 W,'A' M,"中" mc
UNION ALL
SELECT 1 W,'B' M,"国" mc
UNION ALL
SELECT 2 W,'C' M,"好" mc
) T  group by t.w
) mm 
lateral view explode(mm.k_V) y as n_m,n_mc
;

结果:
在这里插入图片描述

您可能感兴趣的与本文相关的镜像

Python3.10

Python3.10

Conda
Python

Python 是一种高级、解释型、通用的编程语言,以其简洁易读的语法而闻名,适用于广泛的应用,包括Web开发、数据分析、人工智能和自动化脚本

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值