spark-shell llegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive

最新推荐文章于 2021-02-03 16:02:13 发布
原创 最新推荐文章于 2021-02-03 16:02:13 发布 · 226 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#spark

本文详细解析了如何在 优快云 平台上撰写和理解高质量的博客文章，涵盖了标题、标签和内容的重要性，以及如何有效利用这些元素提高博客的可见性和吸引力。 
https://blog.youkuaiyun.com/querydata_boke/article/details/105289418

 

Spark 2.2.0 启动时报Error while instantiating / java.net.ConnectException
再见孙悟空
07-25 1万+
我的机器： 已经安装好Hadoop Java Scala HiveMaster:192.168.244.129 Slave1.hadoop:192.168.244.128 Slave2.hadoop:192.168.244.130在之前的工作中比如：Hadoop Hive 等环境都已经配置正确在启动用一下命令启动Spark集群时无问题：./sbin/start-all.sh使用JPS查看:132
Spark SQL精华及与Hive的集成（spark sql原理，API,操作外部源数据，SQL函数）
May_J_Oldhu的博客
11-25 1181
Spark SQL精华及与Hive的集成一.Spark SQL原理1.SQL on Hadoop2.spark的前身：shark3.Spark SQL架构4.Spark SQL运行原理5.Catalyst优化器（1）逻辑计划（2）优化（3）物理计划二.Spark SQL API1.Dataset（1）基本概念（2）使用Case Class创建Dataset2.Dataframe（1）基本概念（2）RDD与DataFrame对比（3）创建DataFrame及基本操作（4）RDD->DataFrame方式
xml问题：Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘
君知君不知
07-16 639
Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': at org.apache.spark.sql.SparkSession$.org$apache$spark$sql$SparkSession$$reflect(SparkSession.scala:981) at org.apache.
Error while instantiating 'org.apache.spark.sql.hive.HiveExternalCatalog':
qq_40012203的博客
08-13 3885
使用spark-shell连接外部hive，出现下面错误： [diao@hadoop111 spark-2.1.1]$ bin/spark-shell 19/08/13 14:15:52 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java class...
Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'
TheManOfCoding的博客
08-10 9992
我在windows下面用idea运行spark-sql程序的时候，报了上面的那个错误，我尝试了很多方法，都没有啥效果，后来我往下继续阅读错误，发现了这个实质性错误Exception in thread "main"java.lang.UnsatisfiedLinkError。 如果是报Error while instantiating 'org.apache.spark.sql.hive.Hiv...
运行spark报错Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'
slibra_L的博客
04-02 6789
问题描述 最近换了一台电脑，将原电脑的spark streaming代码考到了新电脑上，使用IDEA运行却报错了 Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState' The root scratch dir: /tmp/hive on HDFS should be writable 经检查发现是/tmp/...
IDEA SparkSQL连接外部hive报错Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘:
smallworldxyl的博客
02-03 2633
原图 Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': at org.apache.spark.sql.SparkSession$.org$apache$spark$sql$SparkSession$$reflect(SparkSession.scala:981) at org.apac
error while instantiating 'org.apache.spark.sql.hive.hivesessionstate':
03-19
</think>### 解决 `error instantiating org.apache.spark.sql.hive.HiveSessionState` 的方法 此错误通常与 Spark 和 Hive 的集成配置或依赖冲突有关，以下是分步解决方案： --- #### 1. **检查依赖和版本兼容性...
d you are trying to register an identical plugin located at URL "file:/G:/spark-2.1.0-bin-hadoop2.7/spark-2.1.0-bin-hadoop2.7/jars/datanucleus-core-3.2.10.jar." java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState':
最新发布
03-22
spark.sql.hive.metastore.jars /path/to/hive-metastore-jars/* ``` ##### 4. **清理临时文件** 删除本地生成的元数据缓存和临时文件： ```bash rm -r metastore_db rm -r spark-warehouse ``` --- #### 验证...
An error occurred while calling o36.sessionState
03-08
java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder': ... Caused by: java.lang.ClassNotFoundException: org.apache.iceberg.spark.extensions....
windows下安装spark报错 Error while instantiating ‘org.apache.spark.sql.hive.HiveSessionState‘
我俏丽吗的博客
07-30 1486
windows下安装sparkFailed to get database default, returning NoSuchObjectException java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState':新的改变功能快捷键合理的创建标题，有助于目录的生成windows 安装完spark执行spark-shell 报错如下:失败截图解决方法:再
IDEA通过SparkSql访问hive报错：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder
zajbetterme的博客
03-25 7191
Exception in thread "main" java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder': at org.apache.spark.sql.SparkSession$.org$apache$spark...
Spark读取hive数据报Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState
weixin_42963290的博客
04-11 4249
错误如下： Exception in thread "main" java.lang.reflect.InvocationTargetException at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(Nati...
Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'
LAFEU的专栏
04-16 2653
问题 User class threw exception: java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder': 解决：代码里config 配置信息异常；hive.exec.scratchdir 的配置拼写异常 ...
出错-运行spark-shell时报错：Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'
DraGon_HooRay的博客
01-27 1417
第一次运行spark-shell时报错 报错内容如下： [root@ducking spark-2.1.1]# spark-shell Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties Setting default log level to "WARN". To adjust logg...
SparkSQL 通过 HiveContext 查询 hive表数据报错 java.lang.ClassNotFoundException: sparkSql.demo2
weixin_37417954的博客
07-03 1025
错误 java.lang.ClassNotFoundException: sparkSql.demo2 at java.net.URLClassLoader.findClass(URLClassLoader.java:382) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at java.lang.ClassLoa...
spark-sql访问hive的问题记录
weixin_33762130的博客
02-03 162
好久没有弄博客了。。。 hive0.14 spark0.12   [hadoop@irs bin]$ ./spark-sql Spark assembly has been built with Hive, including Datanucleus jars on classpathException in thread "main" java.lang.RuntimeException...
local模式运行spark-shell时报错 java.lang.IllegalArgumentException: Error while instantiating 'org.apache.sp...
weixin_30293079的博客
10-21 2973
先前在local模式下，什么都不做修改直接运行./spark-shell 运行什么问题都没有，然后配置过在HADOOP yarn上运行，之后再在local模式下运行出现以下错误： java.lang.IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState': ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值