hive解析json数组

最新推荐文章于 2024-07-23 15:06:30 发布

BugAngel233

最新推荐文章于 2024-07-23 15:06:30 发布

阅读量607

点赞数 1

文章标签： json hive hadoop spark

本文链接：https://blog.youkuaiyun.com/qq_32506245/article/details/129645863

版权

该文介绍了一种在Hive中解析JSON数组的方法，通过SQL查询和正则表达式的配合，先去除JSON字符串的边界中括号，再转义并分割对象间的逗号，然后使用split和LATERALVIEWexplode来展开对象，最后用get_json_object提取字段值。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

test_table 表中 json_str 字符串格式如下

[
    {
        "id":1,
        "name":"a"
    },
    {
        "id":2,
        "name":"b"
    }
]

SQL解析方式为

SELECT get_json_object(test_json,'$.id') AS id,get_json_object(test_json,'$.name') AS id
FROM test_table
LATERAL VIEW explode(split(regexp_replace(regexp_replace(json_str,'\\[|\\]',''),'\\},\\{','\\}@\\{'),'\\@')) json AS test_json

上面SQL中，最内层 regexp_replace 的作用是匹配去除左右中括号。外层regexp_replace的作用是转义数组中，json对象间连接的, 。这里选用@作为匹配替换的符号，是因为表中，这个json字符串不会出现这个字符。最后，使用split 将各个json对象分开，LATERAL VIEW explode 展开这些对象，get_json_object顺利从对象中取值。

参考网址
一文学会Hive解析Json数组