运行spark demo时出现java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)

最新推荐文章于 2025-06-20 12:09:50 发布
最新推荐文章于 2025-06-20 12:09:50 发布
阅读量1.6w 收藏 5
点赞数 2
CC 4.0 BY-SA版权
分类专栏： scala 文章标签： spark scala
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/kiikgu/article/details/77732507
本文介绍了如何解决Maven中引入的Spark相关包版本与Scala-SDK版本不一致的问题。具体解决方案为统一两个版本到2.11，并详细说明了更改工程中Scala-SDK版本的具体步骤。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

原因: maven引入的spark相关包版本是2.10，而scala－sdk版本是2.12
这里写图片描述

解决：两者统一，都使用2.11
更换工程scala-sdk版本：右键工程名称 -> Open Model Settings
这里写图片描述

IDEA spark 中scala的编译版本问题解决NoSuchMethodError （jvm ）
大模型与Agent智能体
05-04 2万+
Spark IDEA集成环境开发时，pom文件新安装了一些jar包，没注意到其中scala的版本被替换了，运行一个测试程序提示这个：Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayO
NoSuchMethodError:
Mr Huo
01-11 1404
报错信息如下 Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.$conforms()Lscala/Predef$$less$colon$less; at org.apache.spark.util.Utils$.getSystemProperties(Utils.scala:1722) at org.a...
Spark java.lang.NoSuchMethodError: scala.Predef$.refArrayOps
数据之路-忆梦前程
08-22 2489
1.问题 2. spark运行的scala版本是有限制 提示 with scala 2.10 support 下载对应版本的scala，然后重新编译jar包
运行Spark时报错：java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object)
David_house的博客
06-14 2617
运行Spark报错： java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;) 我这里报错的原因是因为我是使用maven创建项目并添加scala框架支持来运行spark程序，我之前使用的scala版本为2.12的，我以为我已经改成了2.11的，结果路径中引入的还是2.12的，而maven中（pom.xml）引入的scala版本是2.11的，总之一句话，使用的scala版本和maven引入的版本不一致！把它们改一致
大数据技术之Spark
最新发布
2301_82162165的博客
06-20 1069
Spark是什么定义：Apache Spark是用于大规模数据（large-scala data）处理的统一（unified）分析引擎。Spark最早源于一篇论文 Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing， 该论文是由加州大学柏克莱分校的 Matei Zaharia 等人发表的。论文中提出了一种弹性分布式数据集（即 RDD）的概念。
【Scala】Scala的Predef对象
weixin_33751566的博客
07-23 210
隐式引用(Implicit Import) Scala会自己主动为每一个程序加上几个隐式引用，就像Java程序会自己主动加上java.lang包一样。Scala中。下面三个包的内容会隐式引用到每一个程序上。所不同的是。Scala还会隐式加进对Predef的引用。这极慷慨便了程序猿的工作。 import java.lang._ // in JVM projects, or...
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Object;)
迷路剑客个人博客
10-12 1787
SparkStreaming提交任务到master时报错： Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Object;) 这个错误是因为打包版本中的scala-library版本号和spark集群用的scala-library版本不一致导致。 可以通过运行 ...
java.lang.NoSuchMethodError:scala.Predef$.refArrayOps
qq_43341418的博客
07-10 2101
scala新旧版本冲突导致找不到方法
java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayOps
05-13
这个错误通常是由于 Scala 版本不兼容导致的，可能是您的代码使用了新版本的 Scala，而依赖库使用的是旧版本的 Scala。您可以尝试更新您的依赖库，或者降低您的 Scala 版本。如果您是使用 Maven 进行构建的，可以在 ...
exception in thread "main" java.lang.nosuchmethoderror: scala.predef$.refarrayops([ljava/lang/object;)lscala/collection/mutable/arrayops;
03-16
更具体地说，该错误提示了一个方法"scala.predef$.refarrayops([ljava/lang/object;)lscala/collection/mutable/arrayops" 不存在。可能是因为你的Java代码使用了某个Scala库，但是该库的版本与实际使用的Scala版本...
nosuchmethoderror: scala.predef$.refarrayOps(Ljava/lang/Object;)Lscala/collection/mutable/arrayops
05-25
这个错误通常发生在 Scala 2.13 或更高版本中，因为 Scala 2.13 中已经移除了 `refarrayOps` 方法。如果你的代码是在旧版本的 Scala 中编写的，可能会遇到这个错误。 要解决这个问题，你可以尝试升级你的 Scala ...
Exception in thread “main“ java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object
heyianliunian的博客
09-03 1127
1.问题情况: Exception in thread “main” java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayOps; 2.问题原因 原因是：IDE 里面 pom 文件引入的scala版本和提交的版本不一致 3.解决方法 解决方案： 统一scala的版本就行啦 ...
运行spark出现java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)
qq_36470898的博客
02-10 2386
出现这个问题原因是原因Maven导入的spark依赖的是Scala版本和本地版本不一致。 这里我导入的Maven导入的spark依赖的是Scala版本是2.11而本地是2.12 <dependencies> <dependency> <groupId>org.apache.spark</groupId> ...
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object
qq_38250124的博客
11-30 845
scala 版本（本机的） 与 spark版本不匹配  下载指定版本的 与spark想对应的   将Scala的框架添加到这个项目中，方法是在左侧栏中的项目名称上右键菜单中点击Add Framework Support…，然后在打开的对话框左侧边栏中，勾选Scala前面的复选框，然后点击确定即可（前提是上文中所述步骤都已正确走通，否则你很有可能看不到Scala这个选项的）；  ...
Scala Predef对象详解
热门推荐
周天祥的博客
11-16 8万+
Scala Predef对象 Scala程序设计 第2版 - 原版.pdf 下载：https://download.csdn.net/download/u014646662/10805074 目录： 1.Predef源码 2.类型装换 3.类型定义 4.条件检查方法 5.输入输出方法 6.其他 对人工智能感兴趣的同学，可以点击以下链接： 现在人工智能非常火爆，很多朋友都想学，但...
【scala原理系列】scala Predef对象的原理示例源码详解
wang2leee的博客
09-20 284
Predef是 Scala 标准库中的一个对象，它包含了一些常用的方法和隐式转换。下面是对Predef类型装箱和拆箱intWrapper：将基本类型装箱为对应的包装类型。Byte2byteLong2long：将包装类型拆箱为基本类型。集合和数组操作：将数组转换为类型，提供了丰富的数组操作方法。：分别将不同类型的数组转换为相应的类型。wrapString：将字符串转换为类型，提供了丰富的字符串操作方法。：将转换为普通字符串。字符串格式化：将任意类型转换为类型，提供了格式化字符串的功能。
Spark 运行问题 java.lang.NoSuchMethodError: scala.Predef 解决方案
cauchy8389的专栏
09-10 2299
idea中如果遇到这种问题，一般查找和spark匹配的scala版本就能解决 如果不能解决 请打开项目的iml文件，去掉不同版本的scala的orderEntry就能解决。 另在mac中通常会有问题no snappyjava in java.library.path 解决方案如下 1. 从maven center中下载snappy-java-1.x.x.x.jar  2. unzip解压在路...
Spark 运行问题 java.lang.NoSuchMethodError: scala.Predef 解决方案
qq_38250124的博客
07-31 675
spark 程序在idea本地跑没问题 但一旦打包jar 提交到集群 就报这个错 百度一下说是scala 版本的问题 ，检查了下maven pom spark scala scala-sdk jdk version 都非常匹配没有毛病啊 最后发现在 项目的 iml文件中 去掉不同版本的scala的orderEntry就能解决。只保留一个 通常我都是 spark 2.3.2 jdk1.8...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值