error: bad symbolic reference. A signature in HiveContext.class refers to term hive

最新推荐文章于 2024-08-04 16:59:02 发布
最新推荐文章于 2024-08-04 16:59:02 发布
阅读量273 收藏
点赞数
文章标签： 大数据
本文介绍了在使用CDH5.3.6版本的Spark时遇到的HiveContext使用问题及错误提示。该版本的Spark不支持HiveContext，文中提供了社区讨论链接作为参考。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在spark-shell中执行val sqlContext = new org.apache.spark.sql.hive.HiveContext(sc)报错：

error: bad symbolic reference. A signature in HiveContext.class refers to term hive

 

我使用的是CDH5.3.6，这个版本中spark是无法使用HiveContext的，参考：

https://community.cloudera.com/t5/Advanced-Analytics-Apache-Spark/Hive-Context-in-CDH-5-3-x/td-p/23312

spark cluster 下 spark-shell/spark-spark提交wordcount sparksql Demo
xinxin_zhang的专栏
11-27 1767
一：环境配置 My conf/spark-env.sh is: export SPARK_MASTER_IP=node1.cluster.local export SPARK_WORKER_CORES=20 export SPARK_WORKER_MEMORY=12g export SPARK_WORKER_DIR=/scratch/cperez/spark export 
使用Maven编译Scala时报：bad symbolic reference. A signature in package.class refers to type compileTimeOnly
一杯咖啡。的博客
07-02 2676
在使用maven编译scala的时候，报错：    Error:scalac: bad symbolic reference. A signature in package.class refers to type compileTimeOnly    in package scala.annotation which is not available.    It may be complete...
Spark 报错 ： Error: bad symbolic reference. A signature in SparkContext.class refers to term conf
jast
08-12 1093
报错如下： Error:scalac: Error: bad symbolic reference. A signature in SparkContext.class refers to term conf in package org.apache.hadoop which is not available. It may be completely missing from the c...
使用hivecontext的异常
weixin_42035517的博客
11-20 423
直接看原文：https://blog.csdn.net/zgjdzwhy/article/details/71056801
Maven用Scala编译，bad symbolic reference. A signature in package.class refers to type compileTimeOnly
leishenop的专栏
10-14 6213
今天再用Maven来编写Spark程序的时候，在使用了SQLContext的API之后，每次编译就是不通过。看错误信息提示了bad symbolic reference. A signature in package.class refers to type compileTimeOnly。这个错误。在网上找了一大堆，都没有找到这个问题的真正解决方法。最后，无意中看了一个博客，最后解决了，所以在这里
记一次使用Phoenix-Spark时的错误：bad symbolic reference. A signature in package.class refers to term
Lee-Think的博客
12-05 1315
编译时抛出异常 ``` error: bad symbolic reference. A signature in package.class refers to term sql in package org.apache.spark which is not available. It may be completely missing from the current classpath, or the ver
解决AttributeError: module ‘keras.backend‘ has no attribute ‘image_dim_ordering‘错误
weixin_47182777的博客
07-20 1632
遇到的问题，记录解决问题的方法，本问题是Keras版本不同
深度学习问题，代码报错：AttributeError: module ‘keras.backend‘ has no attribute ‘tensorflow_backend‘
weixin_46376680的博客
04-24 2360
这个解决方案是找到对应版本的keras和 tensorflow，或者是把代码改成符合新版本的，但是本小白不会改，有没有大神帮帮忙。
AttributeError: module ‘tensorflow.python.framework.ops‘ has no attribute ‘_TensorLike‘解决方法
Jason24_Zeng的博客
10-15 9152
贴出问题： --------------------------------------------------------------------------- AttributeError Traceback (most recent call last) <ipython-input-17-c998649dcbf1> in <module> ----> 1 autoencoder, encoder = autoenco
CMake Error: failed to create symbolic link ‘libz.so.1‘: Operation not supported 链接问题分析，解决，libssh交叉编
jjjxxxhhh123的博客
08-04 1346
下面拿我自己举个例子，我要在Linux arm 架构下搭建一个SSH服务器，所以需要移植libssh库来实现，而libssh库又需要zlib 库，所以我需要交叉编译出zlib 库。1，一般大家可能都是在windous下的虚拟机中去编译，源码的目录可能在共享文件夹下，我理解共享文件夹是挂载在fuse.vmhgfs-fuse系统，该系统是不支持符号链接的。大家可能有过这样的问题，有时候可能需要移植一些库源码交叉编译出arm架构的库，会出现库链接失败，这是为啥呢？
bad symbolic reference. A signature in RDD.class refers to term hadoop in package org.apache which i
易者悠也
06-20 3944
Error:scalac: bad symbolic reference. A signature in RDD.class refers to term hadoop in package org.apache which is not available. It may be completely missing from the current classpath, or the versio
idea中scala版本错乱导致的问题Error:scalac: bad symbolic reference. A signature in package.class refers to type
m0_37984367的博客
11-15 4977
Error:scalac: bad symbolic reference. A signature in package.class refers to type compileTimeOnly in package scala.annotation which is not available. It may be completely missing from the current cla...
spark idea 的配置问题
weixin_33695450的博客
03-31 337
不知道下面的错误是为什么？ Error:scalac: missing or invalid dependency detected while loading class file 'RDD.class'. Could not access term hadoop in package org.apache, because it (or its...
kafka结合spark 错误整理
大数据机器学习
03-23 3224
1.  解决方法： 缺少包
使用SparkSQL/DataFrame读取HBase表
热门推荐
strongyoung的专栏
08-13 2万+
HBase-Spark Connector手段DataSource是在Spark-1.2.0引入的，在简单的HBase KV存储和复杂的关系型SQL查询之间架起了桥梁，使得用户可以在HBase上使用Spark执行复杂的数据分析工作。HBase Dataframe是一个标准的Spark Dataframe，能够与任何其他的数据源进行交互。
SQLContext与HiveContext的使用
段渣渣推轮子的飙车场
03-28 9942
版权声明：未经允许，随意转载，请附上本文链接谢谢（づ￣3￣）づ╭❤～ https://blog.csdn.net/xiaoduan_/article/details/79730428 SQLContext与HiveContext的使用 SQLContext的使用 SQLContext在Spark1.6中使用，在spark2.x中已经标记为过时，不推荐使用。 示例代码 pa...
构建报错:-1: error: Symbolic links not supported: disabling -L.
最新发布
06-17
</think>### 解决“Symbolic links not supported: disabling -L”构建错误 该错误通常发生在构建工具检测到文件系统不支持符号链接时，导致编译过程自动禁用 `-L`（符号链接）功能。以下是系统性的解决方案： ###...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值