启动hive出现：cannot access /usr/local/spark/lib/spark-assembly-*.jar: No such file or directory

最新推荐文章于 2023-04-03 21:43:27 发布
原创 最新推荐文章于 2023-04-03 21:43:27 发布 · 4.1k 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#cannot access /usr/local/spark #启动hive提示

本文介绍了解决在新版本Spark中由于jar包位置变动导致Hive启动失败的问题。通过更新Hive配置文件中的sparkAssemblyPath路径指向正确安装的Spark jar包，可以有效解决该问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

原因是这个jar包在新版本的spark中的位置已经改变！我们要做的只是将hive中的启动文件中的sparkAssemblyPath这一行更改为你安装的spark的jar包路径即可。具体如下：

到Hive的bin目录下编辑hive：


找到下图标记的这一行；

将上图红框内的内容更改为下图所示内容。


问题解决！！


ls: 无法访问/usr/local/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
默主归沙的博客
03-17 2988
原因：spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有办法找到这个JAR包。 如何解决这问题？ cd /usr/local/hive/bin 看上图有个hive vi hive \ 就是敲一个/sparkAssemblyPath定位好， 把${SPARK_HOME}/lib/spark-assembly-*.jar替换成${SPARK_HOME}/jars/*.jar .
ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or d
XiaoYu的博客
04-12 1787
ls: cannot access /home/hadoop/spark-2.2.0-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory解决方法打开hive的安装目录下的bin目录，找到hive文件cd $HIVE_HOME/bin vi hive将鼠标定位的位置，更改成下图...
启动hive报错：ls:cannot access '/usr/local/spark/lib/spark-assembly-*.jar':No such file or directory
weixin_43968936的博客
11-01 2588
报错如图： spark2.0版本之后，原有lib目录下的spark-assembly-*.jar包被拆成多个jar包，存放路径是在spark的jars目录下。 解决方案： 进入hive安装目录：(我的目录是/usr/local/hive) cd /usr/local/hive cd ./bin 编辑hive 将 sparkAssemblyPath=ls ${SPARK_HOME}/lib/sp...
Hive在spark2.0.0启动时无法访问../lib/spark-assembly-*.jar: 没有那个文件或目录的解决办法
HFUTLXM的博客
08-04 1127
最近将整个架构升级到Spark 2.0.0之后，发现一个问题，就是每次进行Hive --service metastore启动的时候，总是会报一个小BUG。 无法访问/home/ndscbigdata/soft/spark-2.0.0/lib/spark-assembly-*.jar: 没有那个文件或目录。 而这一行究竟是怎么回事，网上没有任何有关的资料。 没办法，只
hive-01_hive_spark-assembly-jar No such file or directory
Welcome to Feng.Chang's Blog
12-03 297
ref: https://www.cnblogs.com/tijun/p/7598281.html 安装好hive-1.2.2版本后发现运行出现下面报错 (py27) ➜ ~ hive ls: cannot access /data/server/spark-2.0.2-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directo...
Hive启动报错spark-assembly-*.jar: No such file or directory
xiaobao5214的博客
11-29 1372
安装完成spark后，启动hive，发生错误: ls: cannot access /opt/soft/spark-2.1.3-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory 问题原因：   新版本的spark的jar包路径有变化，hive没有及时更新 解决办法： // 修改hive的启动脚本 vim h...
启动hive包ls: cannot access '/usr/local/spark/lib/spark-assembly-*.jar': No such file or directory
06-03
启动 Hive 需要依赖 Spark，错误提示中显示 `/usr/local/spark/lib/spark-assembly-*.jar` 文件不存在，可能是因为 Spark 没有安装或者安装位置不正确。 你可以先确认一下 Spark 是否已经安装，并且 `/usr/local/...
ls: cannot access '/usr/local/spark/lib/spark-assembly-*.jar': No such file or directory
06-03
这个错误提示是因为在你运行了 `ls` 命令之后，发现 `/usr/local/spark/lib/` 目录下并没有 `spark-assembly-*.jar` 这个文件。你可以确认一下这个文件是否存在，或者是否路径是否正确。如果你确定这个文件不存在，...
hadoop@master:/usr/local/hive$ bin/beeline -u jdbc:hive2://hadoop:10000 -n -root ls: cannot access '/usr/local/hive/lib/hive-jdbc-*-standalone.jar': No such file or directory
最新发布
04-25
嗯，用户遇到了Hive Beeline启动时找不到hive-jdbc-*-standalone.jar的问题。我需要先理解这个错误的原因。根据之前的引用，类似的问题可能是因为版本升级导致的路径变化或者文件缺失。比如，引用1和2提到过Spark 2....
Spark3 读写 S3 Parquet, Hive, Hudi
L, there!
05-17 5171
Spark 读 S3 Parquet 写入 Hudi 表 目录 Spark 读 S3 Parquet 写入 Hudi 表 参考 关于S3，S3N和S3A的区别与联系 Spark 读写 S3 Parquet 文件 测试代码 pom.xml 配置文件 EMR Spark任务提交 spark-shell spark-submit Spark 读写 Hudi 本地测试 代码 集群上测试 spark-shell spark-sql Spark-submit Hive 中测
ls: cannot access /usr/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: No such file or ...
weixin_30367873的博客
05-29 545
问题：进入hive时报错，如下所示 [root@hadoop001 bin]# hive ls: cannot access /usr/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: No such file or directory 原因是： spark升级到spark2以后，原有lib目录...
启动hive，提示ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录
weixin_44519468的博客
04-13 617
[root@hadoop03 bin]# hive ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录 原因是： spark升级到spark2以后，原有lib目录下的大JAR包被分散成多个小JAR包，原来的spark-assembly-*.jar已经不存在，所以hive没有...
Hive报错:"/spark//lib/spark-assembly-*.jar: No such file or directory"
极致|专业
01-12 2967
问题重现 安装玩spark集群后,启动hive,报了错误: /spark//lib/spark-assembly-*.jar: No such file or directory 问题原因 新版本的spark,hive没有及时支持更新. 问题解决 // 修改hive的启动脚本 vim hive/bin/hive +116 // 定位到位置,上面一行是原有的,下一行是修改的
ls: 无法访问/xxx/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
weixin_43859562的博客
11-17 836
查了资料好像是spark 1.6版本后面都不用这个大jar包了，取消了，所以找不到， 修改hive目录下的bin/hive vi /xxx/hive/bin/hive 注释这几行就可以了。 # add Spark assembly jar to the classpath #if [[ -n "$SPARK_HOME" ]] #then # sparkAssemblyPath=`ls ${SPARK_HOME}/lib/spark-assembly-*.jar`
hive报错-ls: 无法访问/export/servers/spark/lib/spark-assembly-*.jar: 没有那个文件或目录Exception in thread “main“
weixin_63507910的博客
04-03 731
ls: 无法访问/export/servers/spark/lib/spark-assembly-*.jar: 没有那个文件或目录 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hive/ql/CommandNeedRetryException at java.lang.Class.forName0(Native Method) at java.lang.Class.forName(Class.j
启动hive,报错 ls: cannot access /export/spark/lib/spark-assembly-*.jar: No such file or directory,解决
a904364908的博客
09-20 4213
安装好spark,安装hive,安装的spark版本是2.1.3版本,hive版本是1.1.0 安装好hive后,启动,发现一个报错,cannot access /export/spark/lib/spark-assembly-*.jar: No such file or directory.   看了一下,出现这个问题的原因是因为spark版本升级到2.x以后,原有lib目录下的大JAR包...
hive执行sh脚本时报错No such file or directory的解决办法
ScriptFlying的博客
03-17 9961
一、对于在服务器上新上传的start.sh脚本，启动时容易出现，-bash:./start.sh:/bin/sh^M: bad interpreter:No such file or directory 那么这是什么原因造成的呢，一般情况是因为该sh脚本的格式不正确，如果这个脚本在你本地修改过（使用txt、notepad++打开修改），可能在保存的时候会默认把文件的格式保存为： doc格式（windows系统）、mac（苹果系统），那么在上传到xshell（unix系统）后，unix系统是不支持doc（ma
启动hive时报ls: 无法访问/opt/wdp/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
森屿旅人996的博客
07-16 429
报错如下： ls: 无法访问/opt/wdp/spark/lib/spark-assembly-*.jar: 没有那个文件或目录 [root@hrbu30 hive]# hive ls: 无法访问/opt/wdp/spark/lib/spark-assembly-*.jar: 没有那个文件或目录 Logging initialized using configuration in jar:file:/opt/wdp/hive/lib/hive-common-1.2.2.jar!/hive-log4j.pr
Hive报错：cannot access /usr/local/src/spark-2.2.1-bin-hadoop2.6/lib/spark-assembly-*.jar
Devin
05-05 1111
执行hive报错 ls: cannot access /usr/local/src/spark-2.1.3-bin-hadoop2.6/lib/spark-assembly-*.jar: No such file or directory原因： spark2.0版本之后，原有lib目录下的spark-assembly-*.jar包被拆成多个jar包，存放路径是在spark的jars目录下。 解决...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值