解决Spark导入jblas包提示不存在的问题

本文介绍了解决Spark机器学习过程中遇到的jblas包缺失问题的方法。通过将jar包放置到spark根目录下的jars文件夹中,成功解决了Spark环境中无法识别该依赖的问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近仍然在研究《Spark机器学习》,在学习到4.4.2节“物品推荐”时,需要用到jblas包,书中一如既往地直接粗暴导入 import org.jblas.DoubleMatrix,然后便提示包不存在,陷入僵局

上网查询解决办法,解决的办法分为如下几种:

第一种:使用编译器导入外部jar包。这是一种好办法,但是我目前是在终端下启动spark-shell进行操作,电脑太渣跑不动PyCharm一类的编译器,只能另寻方法;

第二种:先将jar包复制到lib文件夹下(lib文件夹在哪里我也不知道,也不说敲打),然后编辑spark-env.sh文件,用export语句进行导入,导入的语句五花八门。我尝试了一种导入方法,spark-shell直接狗带骂人

十分无奈之下,发现spark根目录下有一个jars文件夹,里面有各种各样的jar包,于是产生想法,直接将jar包复制到这个目录,能否可行呢?

实践证明,一切工作的都非常完美

事情做的简单一点,不是很好嘛(手动摊手)


附一个jblas包的百度云下载地址:

http://pan.baidu.com/s/1o8w6Wem

感谢http://www.cnblogs.com/xiaoyesoso/p/5570079.html文章作者的地址提供

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值