Hive安装中元数据初始化遇到的坑

最新推荐文章于 2025-03-12 18:51:50 发布

剑行极锋

最新推荐文章于 2025-03-12 18:51:50 发布

阅读量4.4k

点赞数 3

分类专栏： Sven_Hive Sven_软件

本文链接：https://blog.youkuaiyun.com/Sven119/article/details/90666518

版权

在Linux环境中安装Hive并使用MySQL作为元数据存储时，遇到多个配置问题。首先，`hive-default.xml.template`文件需要更改为`hive-site.xml`并正确配置参数，否则可能导致元数据初始化失败。其次，确保不覆盖已修改的MySQL配置，以防止回退到默认的Derby数据库。此外，Hive启动时出现临时目录错误，需在`hive-site.xml`中调整相应配置。最后，务必在Hive的lib目录下放置`mysql-connector-java-5.1.7-bin.jar`驱动，否则将无法连接到数据库。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

背景：

在已经部署了hadoop的linux中，安装hive，并元数据用MySQL数据库。

hive-default.xml.template 是坑中之最。

1.需要修改文件名。注意！这个文件名需要改。

cp hive-default.xml.template  hive-site.xml

cp beeline-log4j2.properties.template  beeline-log4j2.properties 
cp hive-env.sh.template  hive-env.sh
cp hive-exec-log4j2.properties.template hive-exec-log4j2.properties 
cp hive-log4j2.properties.template  hive-log4j2.properties
cp llap-cli-log4j2.properties.template llap-cli-log4j2.properties
cp llap-daemon-log4j2.properties.template llap-daemon-log4j2.properties

2.文件里面的配置参数。网上说的一些配置参数，在这个文件里都有默认的，而且文件里参数极多。我的方法是将hive-site.xml这个文件下载下来，然后通过关键字查找，来修改参数配置。再上传回去。注意！这个配置参数，最好是直接修改默认值。网上说，copy到文件上也可以。经过尝试，我将这段参数，粘贴到段首，会报错，初始化失败。可能是由于配置文件执行顺序是从上到下的，上面配置的mysql，到下面默认值会进行覆盖，又回到了默认的derby数据库。大家可以自行尝试放在文末，看是否会报错。我是直接把默认配置改了，没有出现问题。

<property>
  <name>javax.jdo.option.ConnectionURL</name>
  <value>jdbc:mysql://Hadoop:3306/hivedb?createDatabaseIfNotExist=true</value>
  <description>JDBC connect string for a JDBC metastore</description>
</property>
<property>
  <name>javax.jdo.option.ConnectionDriverName</name>
  <value>com.mysql.jdbc.Driver</value>
  <description>Driver class name for a JDBC metastore</description>
</property>
<property>
  <name>javax.jdo.option.ConnectionUserNa

最低0.47元/天解锁文章