json建表

Hive JSON数据解析教程
本文详细介绍如何使用Hive加载并解析JSON格式的数据文件,包括创建原始表、解析JSON字段及处理多字段情况的方法。

1、先加载 rating.json 文件到 hive 的一个原始表 rate_json
create table rate_json(line string) row format delimited;
load data local inpath ‘/home/hadoop/rating.json’ into table rate_json;
2、创建 rate 这张表用来存储解析 json 出来的字段:
create table rate(movie int, rate int, unixtime int, userid int) row format delimited fields
terminated by ‘\t’;
解析 json,得到结果之后存入 rate 表:
insert into table rate select
get_json_object(line,’.movie′)asmoive,getjsonobject(line,′.movie') as moive, get_json_object(line,'.movie)asmoive,getjsonobject(line,.rate’) as rate,
get_json_object(line,’.timeStamp′)asunixtime,getjsonobject(line,′.timeStamp') as unixtime, get_json_object(line,'.timeStamp)asunixtime,getjsonobject(line,.uid’) as userid
from rate_json;
解决多字段如(||)
create table t_bi_reg(id string,name string)
row format serde ‘org.apache.hadoop.hive.serde2.RegexSerDe’
with serdeproperties(‘input.regex’=’(.)\|\|(.)’,‘output.format.string’=’%1ss %2ss’)
stored as textfile;

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值