spark 启动sql Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

最新推荐文章于 2024-04-16 15:30:53 发布
原创 最新推荐文章于 2024-04-16 15:30:53 发布 · 2.7k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#spark #hive

本文介绍了解决启动Spark时报错的问题，主要针对Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient错误。通过修改hive.site.xml文件中的hive.metastore.schema.verification属性值为false来解决。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

问题：启动Spark时报错 （Hive安装也有可能会出现该问题） 

Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

 

将hive.site.xml文件中的
<property>
  <name>hive.metastore.schema.verification</name>
  <value>true</value>
</property>
改为false即可

解决Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
u014034497的专栏
05-29 1430
Exception in thread "main" org.apache.spark.SparkException: Job aborted due to stage failure: Task 175 in stage 4.0 failed 8 times, most recent failure: Lost task 175.7 in stage 4.0 (TID 421, bsa100):...
Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMeta
weixin_62251830的博客
05-24 303
配置文件也都导入了，还是不行。
Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient报错，问题排查...
weixin_30216561的博客
07-09 562
背景 最近在整合pyspark与hive，新安装spark-2.3.3以客户端的方式访问hive数据，运行方式使用spark on yarn，但是在配置spark读取hive数据的时候，这里直接把hive下的hive-site.xml复制到spark目录下，启动了一次spark，上面的问题就出现了。 网上的说法： hive元数据问题，需要重新初始化hive的元数据 但是这个方法肯定不适合我，因为仓...
Spark整合Hive报错：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
qq_15076569的博客
12-15 5371
报错截图： 整合Hive过程： hive版本：hive-1.1.0-cdh5.14.0                 spark版本：spark-2.0.2-bin-hadoop2.7 将hive的conf目录下的hive-site.xml配置文件拷贝到spark的conf目录下。 hive的元数据存储在远端的mysql上，所以需要将mysql-connector-java-5.1....
Spark执行sql命令出错：Uable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
a921026768的博客
05-20 4378
运行Spark作业出现问题 异常信息：pyspark.sql.utils.AnalysisException: ‘java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient;’ 问题出现原因 （1）PySpark 没有找到 MySQL 的 JDBC 驱动，因此在启动pyspark时，不
解决Hive启动失败Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
01-09
FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 通过控制台的...
可启动Hive，无法使用Hive：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
最新发布
Tesla的博客
04-16 3692
林子雨老师的Hive3.1.2安装，可以启动Hive，但是无法使用Hive，错误简要：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient，元数据库初始化，。hive安装
hive Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
qq_40555400的博客
03-23 1048
1. hive 启动报错 java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient at org.apache.hadoop.hive.metastore.utils.JavaUtils.newInstance(JavaUtils.java:86) at org.apache.hadoop.hive.metastore.RetryingM
hive执行sql语句报错“Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
qq_39954916的博客
10-01 1408
hive执行sql语句报错“Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 在安装了hive的节点上用如下命令启动 metastore 服务： # 后台启动 metastore 服务器端，默认使用 9083 端口 nohup hive --service metastore & # 或者使用指定的端口号： nohup hive --service metastore -p
spark.sql集成hive:Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
weixin_45779793的博客
08-10 1550
SparkSQL集成hive 错误：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 写sparksql，查询hive表报错 Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 查询不到hive数据，如果没有版本冲突（使用的hive版本不是2以上） 可以通过schematool
spark-sql读写Hive遇到关于hive异常：Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaSt
少年阿宏
10-28 432
我的机器是从主节点克隆的 ,需要把hive初始化一下 在Linux任意工作目录下, schematool -dbType mysql -initSchema 初始化的时候遇到错误Error: Duplicate key name ‘PCS_STATS_IDX’ (state=42000,code=1061) 只需要把mysql中的hive库删除掉 重新初始化hive就好了 ...
Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
颹蕭蕭
08-30 1328
hive> show databases; FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 原因 没有初始化 元数据 数据库，在我这是 derby 那就初始化一下 root@monkey-VirtualBox:/home/monkey# $HIVE_HOME/bin/schemato
在启动hive时Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
cyh
10-16 1045
在启动hive时出现这段错误， 重试了很多遍， 原来是mysql jar没有拷贝到hive/lib目录下
 Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
微电子学与固体电子学-俞驰
05-03 2438
020-05-03 10:18:11 WARN Hive:168 - Failed to access metastore. This class should not accessed in runtime. org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to i...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值