hive2.3.0配置mysql作为元数据库出现无法实例化问题及解决办法

最新推荐文章于 2024-04-16 15:30:53 发布
最新推荐文章于 2024-04-16 15:30:53 发布
阅读量2.5k 收藏 3
点赞数 1
CC 4.0 BY-SA版权
文章标签： 数据库 mysql hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/bingheshini/article/details/78179426
在Ubuntu 16.04.02系统上，使用Hadoop 2.7.3和Hive 2.3.0时遇到Hive元数据存储到MySQL的问题。当尝试实例化SessionHiveMetaStoreClient时失败。解决方法包括：关闭Hadoop的安全模式，调整hive-site.xml配置文件中连接MySQL的URL为127.0.0.1，并重新初始化MySQL元数据。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

配置环境：ubuntu16.04.02系统，hadoop2.7.3完全分布式模式，hive2.3.0，mysql5.7.19

问题描述如下：

FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException:

Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

解决方法：

先debug一下 hive -hiveconf hive.root.logger=DEBUG,console

 发现hadoop处于安全模式，使用命令语句： hadoop dfsadmin -safemode leave 关闭安全模式

初始化mysql：schematool -dbType mysql -initSchema 出现拒绝连接问题

修改hive-site的配置信息，

<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true&amp;useSSL=false</value>
<description>JDBC connect string for a JDBC metastore</description>
</property>

将master改为127.0.0.1

<property>
<name>javax.jdo.op

最低0.47元/天 解锁文章

200万优质内容无限畅学
冰河是你
关注
《大数据： Hive 关联MySQL数据库》
yexiang优快云的专栏
10-14 607
一、Hive 默认的数据库derby 继上篇 我们在hive 中操作一下，语法后面说，这篇主要讲如何和Mysql数据库关联起来，derby数据库只简单介绍，我们并不会去用这玩意，非常的不好用，主要是和Mysql关联，用Mysql数据库 1. Hive 命令进入客户端什么也不做退出，会生成一个目录metastore_db 这个就是hive默认的 derby数据库，还有一个log文件 yexiang@hadoopSql:<hive>$ pwd /home/yexiang/hive y...
Hive--配置事务（行级更新）及遇到的问题解决
乔治在哪里
09-25 1859
Hive从0.14版本以后开始支持行级更新，本博客使用的Hive版本为2.3.3。 我的Hive配置的metastore在远程（我的windows本机）的mysql数据库上，如果配置行级更新，需要在hive的配置文件中配置几个属性： vi apache-hive-2.3.3-bin/conf/hive-site.xml 加入如下5个属性： <property> ...
Hive无法启动的解决方案
gjinc的博客
08-17 1882
需要删除core-site配置文件中hadoop.tmp.dir映射的文件目，一般在hadoop/tmp文件夹下。
hive client java_java – Apache Hive：无法实例化org.apache.hadoop.hive.metastore.HiveMetaStoreClient...
weixin_36125719的博客
02-15 634
我正在尝试安装Apache Hive,我将HIVE_HOME和HADOOP_HOME插入hive_config.sh并将一些hive jar复制到$HADOOP_HOME / lib中但是当我尝试使用hive命令启动它时,会出现以下错误：Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException...
其他节点能对hive做操作，只有一个节点操作hive时报：无法实例化
weixin_44983748的博客
11-19 562
其他节点能对hive做操作，只有一个节点操作hive报无法实例化 今天装hive的时候结点1可以正常查看数据库，节点3也能正常查看数据库，就节点2查看数据库时报：无法实例化 问题 好家伙给我愁坏了，我寻思我node02节点的hive是复制上去的，和node03操作一模一样，不应该啊，所以直接排除了hive配置错误的问题，查看了一番终于在主教的指点下找到了问题 我hive里配置的是用户+密码登录...
解决Hive安装错误：无法实例化SessionHiveMetaStore的RuntimeException问题
探索大数据世界 - 深入解析数据存储、分布式计算与人工智能
04-25 3855
解决Hive安装错误：无法实例化SessionHiveMetaStore的RuntimeException问题
hive客户端不能连接mysql_hive客户端启动后，报不能实例化SessionHiveMetaStoreClient问题...
weixin_30562757的博客
02-06 448
Hive所在的机器重新启动后又报类似的错误，可能原因有：mariadb数据库服务没有起来，执行以下命令：systemctl start mariadb #启动MariaDBsystemctl stop mariadb #停止MariaDBsystemctl restart mariadb #重启MariaDBsystemctl enable mariadb #设置开机启动试用ps -ef|...
Jupyter中通过pyspark连接Hive数据库
Albert_Fang的博客
08-11 3565
环境 CentOS 7 Hive 2.3.6 Spark 2.3.0 Jupyter hub 1.1.0（notebook，lab通用） Python 3.7 准备 Spark, Hive已安装完成 Jupyter 通过Anaconda 安装完成 在spark/bin目录中，可通过spark-sql，pyspark连接hive pyspark测试代码 from pyspark import SparkConf, SparkContext from pyspark.sql import HiveConte
【Hive】Hive 2.3.2 安装
人生所向，皆是美好
12-31 506
文章目录1. 内嵌 Derby 版本1.1 下载安装包1.2 解压安装包1.3 配置环境变量1.4 初始化元数据1.5 启动hive，进入hive客户端1.6 derby方式缺点2. 外置 MySQL 版本1. 内嵌 Derby 版本2.1 下载安装包2.2 解压安装包2.3 配置环境变量2.4 安装mysql数据库2.5 修改配置文件3. Linux RPM 方式安装 MySQL3.1 检查以前...
hive报错
u014545085的博客
11-27 892
hive报错 Logging initialized using configuration in jar:file:/usr/local/hive/lib/hive-common-1.2.1.jar!/hive-log4j.properties Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeExc...
hive初始化源数据失败！
viho+的博客
04-29 2432
schematool -dbType mysql -initSchema
Mysql-5.7.24和Hive-2.3.0的安装
孙大圣的博客
06-03 789
实验环境： centos7 Mysql-5.7.24 使用yum源下载 hive-2.3.0 只需要在主节点完成即可 一、安装mysql 1.下载yum源 首先查看本机是否有自带数据库，如果有先卸载自带数据库 rpm -qa |grep mysql rpm -qa|grep mariadb 删除 rpm -e --nodeps mariadb-libs-5.5.6...
ubuntu安装hive初始化数据库时报错
飞花舞者的博客
05-10 312
执行如下命令： 报错 解决方法：删除创建的数据库，重新再创建一次。 就没问题了 ~
可启动Hive，无法使用Hive：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
最新发布
Tesla的博客
04-16 3692
林子雨老师的Hive3.1.2安装，可以启动Hive，但是无法使用Hive，错误简要：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient，元数据库初始化，。hive安装
【无标题】
落魄书生的博客
04-09 297
还有个说明：我的集群是没有装spark的，我是在win的IDEA里的maven使用了spark 3.0.0，有一个本地模式。我试了还是不行，后面我去看了hive-site.xml文件配置，还需要开启一个参数。应该就可以了，还需要说明的是：开启原数据服务还是需要的，我试了没开，还是会有报错。相信你已经看过其他同样解决相同问题的博客，如果没有解决，可以试试本文解决的方法。无法实例化，有可能是原数据的问题，我看了其他的博客，需要开启原数据服务。（如果与你相同，很幸运可以减少你探索是否是版本的问题）
启动Hive时初始化元数据失败的问题与解决方法
Marquez96的博客
01-06 4860
INFO [main] metastore.HiveMetaStore: 0: Opening raw store with implementation class:org.apache.hadoop.hive.metastore.ObjectStore 2022-01-06T10:01:13,592 INFO [main] metastore.ObjectStore: ObjectStore, initialize called 2022-01-06T10:01:13,597 WARN [mai..
hive本地模式 schematool无法初始化mysql数据库
热门推荐
lby0307
05-14 2万+
异常信息：[root@kdg01 bin]#  schematool -initSchema -dbType mysqlwhich: no hbase in (/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/tmp/myshell:/root/myshell:/usr/mysoft/jdk1.8.0_111/bin:/usr/mysoft/jd...
Hive本地模式安装及遇到的问题和解决方案
liushaobo的专栏
06-14 1万+
Apache Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。 其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。Hive有三种运行模式： 1.内嵌模式：将元数据保存在本地内嵌的Der
Hive安装与配置教程：MySQL元数据库集成
4. 配置Hive以使用MySQL作为元数据库。这需要修改Hive配置文件，通常是`hive-site.xml`。需要设置以下几个关键参数： - `javax.jdo.option.ConnectionURL`：指向MySQL数据库实例的JDBC连接URL。 - `javax.jdo....
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值