beeline连接hive时找不到spark-assembly-*.jar问题

唐_厨

于 2019-11-03 16:04:21 发布

阅读量537

点赞数

文章标签： hive beeline spark-assembly-*.jar

本文链接：https://blog.youkuaiyun.com/code_Cook_er/article/details/102883303

版权

在升级spark后，由于lib目录下jar包结构变化，beeline在连接hive时出现找不到spark-assembly-*.jar的错误。只需调整配置即可解决此问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

`[user@weifenbu ~]$ beeline -u jdbc:hive2://192.168.72.50:10000
ls: 无法访问/home/user/module/spark/lib/spark-assembly-*.jar: 没有那个文件或目录
Connecting to jdbc:hive2://192.168.72.50:10000

spark更新后，将原本大的lib包下的整个大的jar包打散了成小的jar包，所以目录结构的改变导致了找不到此文件。简单的改一下配置文件就好了

if [[ -n "$SPARK_HOME" ]]
then
  sparkAssemblyPath=`ls ${SPARK_HOME}/lib/spark-assembly-*.jar`
  CLASSPATH="${CLASSPATH}:${sparkAssemblyPath}"
fi
将spark-assembly-*.jar  改为  spark-*.jar就可以了
————————————————
版权声明：本文为优快云博主「Jreds」的原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.youkuaiyun.com/onionm/article/details/98502960

谢谢！