Unable to instantiate SparkSession with Hive support because Hive classes are not found.

最新推荐文章于 2024-04-04 23:23:48 发布

原创最新推荐文章于 2024-04-04 23:23:48 发布 · 474 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hive #hadoop #大数据

bug 专栏收录该内容

20 篇文章

订阅专栏

当Spark尝试集成Hive时出现错误，通常是由于缺少必要的依赖。解决方法是在项目的XML配置文件中添加Spark-Hive的依赖项，具体为org.apache.spark的spark-hive_2.11模块，版本对应于Spark的版本。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

问题

spark集成hive报错

原因

没有加入依赖

解决

在xml文件加入以下依赖

        <!--spark集成hive依赖-->
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-hive_2.11</artifactId>
            <version>${spark_version}</version>
        </dependency>

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

一位不愿透露姓名的肥宅

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Unable to instantiate SparkSession with Hive support because Hive classes are not found

九师兄

02-14

1万+

Exception in thread &quot;main&quot; java.lang.IllegalArgumentException: Unable to instantiate SparkSession with Hive support because Hive classes are not found. at org.apache.spark.sql.SparkSession$Builder.en...

解决Hive启动失败Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

01-09

今天在使用Hadoop集群上的Hive时，结果出现了以下的情况。 hive (default)> show databases; FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient 通过控制台的异常信息我们可以知道Hive的metadata服务未开启导致的。解决方案:

参与评论您还未登录，请先登录后发表或查看评论

报错Unable to instantiate SparkSession with Hive support because Hive classes are not found.解决方法

GitHub-ChauserMondieu

04-04

2894

java.lang.ClassNotFoundException: org.apache.spark.sql.hive.HiveSessionState； javax.jdo.JDOFatalInternalException: Error creating transactional connection factory

CDH 6.3Unable to instantiate SparkSession with Hive support because Hive classes are not found.解决办法

BertramLAU的专栏

06-25

1638

系统环境 CentOS 7.7.1908 CDH 6.3.1 问题现象执行spark-submit，具体命令如下： spark-submit --class xxx --master yarn --deploy-mode cluster --driver-memory 4g --executor-memory 2g --executor-cores 1 --queue thequeue /tmp/xxx.jar console输出如下： 2020-06-25 17:59:56 WARN Nativ

Spark3 Unable to instantiate SparkSession with Hive support because Hive classes are not found

qq_39937778的博客

02-28

1588

spark3 hive 报错 enableHiveSupport

unable to instantiate sparksession with hive support because hive classes are not found.

06-28

这个错误提示说明在创建带有Hive支持的SparkSession时，找不到Hive类。可能是因为您的应用程序缺少必要的Hive依赖项或者依赖项版本不兼容。建议您检查应用程序的依赖项并确保包括了正确的Hive依赖项。如果是在本地...

Exception in thread "main" java.lang.IllegalArgumentException: Unable to instantiate SparkSession with Hive support because Hive classes are not found.到底为啥报错啊

05-10

好的，我现在需要帮助用户解决SparkSession无法实例化并支持Hive的问题，可能缺少Hive相关依赖或配置错误，具体报错是java.lang.IllegalArgumentException。首先，我得回忆一下Spark和Hive集成的常见问题。用户...

Exception in thread "main" java.lang.IllegalArgumentException: Unable to instantiate SparkSession with Hive support because Hive classes are not found. at org.apache.spark.sql.SparkSession$Builder.enableHiveSupport(SparkSession.scala:891) at org.example.Test10_Hive.main(Test10_Hive.java:15)

最新发布

06-07

### 解决 SparkSession enableHiveSupport 导致的 "java.lang.IllegalArgumentException: Unable to instantiate SparkSession with Hive support because Hive classes are not found" 错误这个问题在 Apache ...

Spark报错：Unable to instantiate SparkSession with Hive support because Hive classes are not found

chandelierds的博客

04-10

7849

现象用IDEA写Spark，在初始化SparkSession时，设置enableHiveSupport()报错，报错信息为Unable to instantiate SparkSession with Hive support because Hive classes are not found. SparkSession sc = SparkSession .builder() .master("local[*]")

【SparkSQL】- 连接 Hive 报错 SparkSession with Hive support because Hive classes are no

兀坐晴窗独饮茶

09-26

1977

报错信息 ERROR StatusLogger No log4j2 configuration file found. Using default configuration: logging only errors to the console. Exception in thread "main" java.lang.IllegalArgumentException: Unable to i...

Unable to instantiate SparkSession with Hive support because Hive classes ar

weixin_43797368的博客

10-29

3799

报错原因：没有加入 hive 的依赖 org.apache.spark spark-hive_2.11 ${spark.version} 把以上依赖加入就可以了

Unable to instantiate SparkSession with Hive support because Hive classes are not found.解决办法

weixin_43552807的博客

03-30

4121

在使用scala+sbt开发spark应用程序时，会遇到找不到hive class这个问题。 spark操作hive应该导入spark-hive包。关于spark-hive包，mvnrepository网站的sbt引用区域写的是： libraryDependencies += “org.apache.spark” %% “spark-hive” % “2.4.4” % "provided" 但是实...

如何使用Hive支持创建SparkSession(Unable to instantiate SparkSession with Hive support because Hive classes)

weixin_39990804的博客

03-17

745

在spark安装目录下的jars文件下找到对应Hive依赖项版本将以下依赖项添加到您的maven项目中。 <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-hive_2.11</artifactId> ...