Statistics in Hive的mysql配置

最新推荐文章于 2024-04-29 19:48:45 发布

每天积累一点点

最新推荐文章于 2024-04-29 19:48:45 发布

阅读量803

点赞数

CC 4.0 BY-SA版权

分类专栏： Hive 文章标签： Hive

本文链接：https://blog.youkuaiyun.com/xia562653223/article/details/18810869

Hive 专栏收录该内容

3 篇文章

订阅专栏

本文介绍如何将HIVE默认的Derby临时统计数据迁移至MySQL数据库的方法，包括配置项的具体设置，如数据库类型、驱动及连接字符串等。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

HIVE执行insert overwrite时候默认会有临时的统计数据在derby数据库中。改成mysql库配置如下：

<property>
  <name>hive.stats.dbclass</name>
 <!-- <value>jdbc:derby</value>-->
  <value>jdbc:mysql</value>
  <description>The default database that stores temporary hive statistics.</description>
</property>
<property>
  <name>hive.stats.jdbcdriver</name>
 <!--  <value>org.apache.derby.jdbc.EmbeddedDriver</value>-->
  <value>com.mysql.jdbc.Driver</value>
  <description>The JDBC driver for the database that stores temporary hive statistics.</description>
</property>


<property>
  <name>hive.stats.dbconnectionstring</name>
 <!-- <value>jdbc:derby:;databaseName=TempStatsStore;create=true</value> -->
<value>jdbc:mysql://IP:port/hive_datapool?CreateDatabaseIfNotExist=true&user= your_user&password= your_ password </value> 
  <description>The default connection string for the database that stores temporary hive statistics.</description>
</property>

更详细的官方文档：https://cwiki.apache.org/confluence/display/Hive/StatsDev