Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'

最新推荐文章于 2023-03-17 13:08:18 发布

原创最新推荐文章于 2023-03-17 13:08:18 发布 · 2.6k 阅读

0 ·

CC 4.0 BY-SA版权

本文针对在使用SparkSQL结合Hive时遇到的Userclassthrewexception异常，详细解析了异常产生的原因，主要为代码中config配置信息错误及hive.exec.scratchdir配置项拼写异常，并提供了具体的解决策略。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题 User class threw exception: java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder':

解决：代码里config 配置信息异常；hive.exec.scratchdir 的配置拼写异常

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

LAFEU

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Spark读取hive数据报Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState

weixin_42963290的博客

04-11

4217

错误如下： Exception in thread "main" java.lang.reflect.InvocationTargetException at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(Nati...

xml问题：Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘

君知君不知

07-16

620

Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': at org.apache.spark.sql.SparkSession$.org$apache$spark$sql$SparkSession$$reflect(SparkSession.scala:981) at org.apache.

1 条评论您还未登录，请先登录后发表或查看评论

IDEA通过SparkSql访问hive报错：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder

zajbetterme的博客

03-25

7159

Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder': at org.apache.spark.sql.SparkSession$.org$apache$spark...

Error while instantiating 'org.apache.spark.sql.hive.HiveExternalCatalog':

qq_40012203的博客

08-13

3864

使用spark-shell连接外部hive，出现下面错误： [diao@hadoop111 spark-2.1.1]$ bin/spark-shell 19/08/13 14:15:52 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java class...

Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'

TheManOfCoding的博客

08-10

9947

我在windows下面用idea运行spark-sql程序的时候，报了上面的那个错误，我尝试了很多方法，都没有啥效果，后来我往下继续阅读错误，发现了这个实质性错误Exception in thread "main"java.lang.UnsatisfiedLinkError。如果是报Error while instantiating 'org.apache.spark.sql.hive.Hiv...

Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder':

07-27

<groupId>org.apache.spark <artifactId>spark-hive_2.x ${spark.version} ``` 请注意，`${spark.version}` 应该替换为您实际使用的 Spark 版本。 4. 检查您的环境设置。确保您的环境正确设置了相关的环境变量...

error while instantiating 'org.apache.spark.sql.hive.hivesessionstate':

最新发布

03-19

</think>### 解决 `error instantiating org.apache.spark.sql.hive.HiveSessionState` 的方法此错误通常与 Spark 和 Hive 的集成配置或依赖冲突有关，以下是分步解决方案： --- #### 1. **检查依赖和版本兼容性...

spark运行python文件时报java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'

08-30

当运行Spark中的Python脚本时，如果出现java.lang.IllegalArgumentException：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'的报错信息，通常是由于Spark配置或环境设置问题引起...

出错-运行spark-shell时报错：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'

DraGon_HooRay的博客

01-27

1395

第一次运行spark-shell时报错报错内容如下： [root@ducking spark-2.1.1]# spark-shell Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties Setting default log level to "WARN". To adjust logg...

Spark-shell启动的时候报Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionStateBuilder’错误

段渣渣推轮子的飙车场

04-04

8428

版权声明：未经允许，随意转载，请附上本文链接谢谢（づ￣3￣）づ╭❤～ https://blog.csdn.net/xiaoduan_/article/details/79815692 Spark-shell启动的时候报java.lang.IllegalArgumentException: Error while instantiating ‘org.apache.spark.sql.hive...

运行spark报错Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'

slibra_L的博客

04-02

6762

问题描述最近换了一台电脑，将原电脑的spark streaming代码考到了新电脑上，使用IDEA运行却报错了 Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState' The root scratch dir: /tmp/hive on HDFS should be writable 经检查发现是/tmp/...

windows下安装spark报错 Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘

我俏丽吗的博客

07-30

1461

windows下安装sparkFailed to get database default, returning NoSuchObjectException java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState':新的改变功能快捷键合理的创建标题，有助于目录的生成windows 安装完spark执行spark-shell 报错如下:失败截图解决方法:再

IDEA SparkSQL连接外部hive报错Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘:

smallworldxyl的博客

02-03

2585

原图 Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': at org.apache.spark.sql.SparkSession$.org$apache$spark$sql$SparkSession$$reflect(SparkSession.scala:981) at org.apac

CDH6.0初始化pyspark Error while instantiating org.apache.spark.sql.hive.HiveSessionStateBuilder

Shyllin的博客

05-24

1813

CDH 集群中初始化pyspark 报错"Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionStateBuilder’:"

spark shell 启动出现：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState':

厚积薄发

03-16

3732

Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState’: 解决方法: sudo chmod -R 777 /tmp/hive/

spark报org.apache.spark.sql.hive.HiveSession

YiRan_Zhao的博客

03-17

1085

链接:https://pan.baidu.com/s/1Mcm7QZO9J8ud6930MVFUng?出现这个问题的原因是我们在windows上模拟开发环境，但并没有真正的搭建hadoop和spark。放到任意的目录下，我这里是放到了E:\vacation\wutils\bin。在重启电脑之后-----在运行代码。

org.apache.spark.sql.hive.HiveSessionStateBuilder

qq_2833955351

11-16

2832

出现这个错误我们需要仔细看一下自己maven项目中的包是不是同一个版本如果者里面的四个包版本不一致，我们需要在pom.xml中注释掉下面图中的全部，刷新pom.xml，然后把注释取消，再次刷新，重新打包jar即可这是spark与hive整合时的错误，如有不懂，请留言 ...