hive参数详解

Hive参数用法详细解析
作者使用Hive进行数据分析超两年,却未找到说明各参数用法的文档,本文就此展开。介绍了如_hive.hdfs.session.path、_hive.local.session.path等参数,涉及会话文件存储路径、临时表路径等,还提及元数据创建相关参数设置。

使用hive进行数据分析已经有两年多了,但是始终没有发现任何一份文档来说明各个参数的用法,本文就来做这样一件事。


1. _hive.hdfs.session.path

每次打开一个hive客户端,就产生了一个会话(session),会生成一个_tmp_space.db文件,这个文件的存储路径就是这个参数的值。使用hdfs -ls命令可以看到(如下),不是本地路径。但_tmp_space.db是个什么格式,存储什么内容,有待进一步研究。

hdfs -ls /home/hive/scratchdir/hdp-jiagu/c1714dde-5c52-45f4-bc57-2af40df28273

2. _hive.local.session.path

顾名思义,每个会话产生的本地路径,直接 ls 就可以看到,如下:

ls /home/hadoop_tmp_dir/hdp-jiagu/c1714dde-5c52-45f4-bc57-2af40df28273

也不清楚这里面存的是啥。


3. _hive.tmp_table_space

 这是你在控制台上创建的临时表的hdfs路径


4. datanucleus.autoCreateSchema

如果元数据不存在,那么直接创建,如果设置为false,那么在之后创建。通常使用默认设置即可。


5. 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值