ERROR common.AbstractJob: Unexpected SIMILARITY_EUCLIDEAN_DISTANCE while processing Job-Specific Opt

Mahout推荐系统实践

最新推荐文章于 2024-12-18 10:00:38 发布

最新推荐文章于 2024-12-18 10:00:38 发布 · 105 阅读

文章标签：

#大数据

本文记录了使用Mahout的RecommenderJob过程中遇到的问题及解决办法。主要问题为命令行参数错误导致无法正确指定输入文件，通过调整命令行选项从-i更改为--input解决了该问题。

在使用mahout的RecommenderJob时遇到上面的问题，调用的命令如下：

bin/hadoop jar lib/mahout-core-0.5.jar org.apache.mahout.cf.taste.hadoop.item.RecommenderJob -i input/recommenderjob.txt -o out/recommenderjob --similarityClassname SIMILARITY_EUCLIDEAN_DISTANCE

提示的错误它就说是Unexpected SIMILARITY_EUCLIDEAN_DISTANCE，也不知道是哪里错误，所以就直接把后面的参数删除了，改为下面的：

bin/hadoop jar lib/mahout-core-0.5.jar org.apache.mahout.cf.taste.hadoop.item.RecommenderJob -i input/recommenderjob.txt -o out/recommenderjob

结果提示下面的错误：

13/04/09 16:25:05 ERROR common.AbstractJob: No input specified or -Dmapred.input.dir must be provided to specify input directory

并且在最末尾还有这样的提示：

Specify HDFS directories while running on hadoop; else specify local file       
system directories

怎么会没有输入文件呢？不是使用-i命令了么？

然后把-i改为 --input命令，然后就直接可以了。

猜测是否是0.5版本的mahout还不支持-i（仅支持--input）？或者是我的环境配置有问题？

又或者是还有一些基础包没有加进来？

继续跟进中。。。

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

iteye_12675

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

TypeError: AsyncConnectionPool.__init__() got an unexpected keyword argument ‘socket_options‘解决方案

weixin_43178406的博客

12-13

5万+

本文主要介绍了TypeError: AsyncConnectionPool.__init__() got an unexpected keyword argument ‘socket_options’ 解决方案，希望能对使用stable diffusion的同学们有所帮助。文章目录 1. 问题描述 2. 解决方案

TypeError: LoraConfig.__init__() got an unexpected keyword argument ‘layer replication‘解决方案

热门推荐

weixin_43178406的博客

04-04

8万+

本文主要介绍了TypeError: LoraConfig.__init__() got an unexpected keyword argument ‘layer replication’，希望能对使用lora微调的同学们有所帮助。文章目录 1. 问题描述 2. 解决方案

参与评论您还未登录，请先登录后发表或查看评论

ERROR common.AbstractJob: Unexpected o while proce

01-23

204

测试mahout in action 中kmean实例的时候,输入命令: bin/mahout kmeans -i reuters-vectors/tfidf-vectors/ \ -c reuters-initial-clusters \ -o reuters-kmeans-cl...

Redisson Spring - Unexpected exception while processing command

hayabusa

10-24

8572

Redisson Spring - Unexpected exception while processing command

Mahout学习之运行canopy算法错误及解决办法

weixin_33850890的博客

10-11

198

一：将Text转换成Vector序列文件时在Hadoop中运行编译打包好的jar程序，可能会报下面的错误： Exceptioninthread"main"java.lang.NoClassDefFoundError: org/apache/mahout/common/AbstractJob 书中和网上给的解决办法都是：把Mah...

hdfs的使用和hadoop的测试

Tracy19970428的博客

05-29

669

HDFS的使用和Hadoop的测试HDFSHDFS 介绍HDFS特性master/slave 架构分块存储名字空间（NameSpace）Namenode 元数据管理Datanode 数据存储副本机制一次写入，多次读出hdfs命令hdfs基本命令hdfs的高级命令hdfs文件限额配置数量限额空间大小限额查看hdfs文件限额数量hdfs的安全模式hadoop的基准测试测试写入速度测试读取速度清除测试数据 HDFS HDFS 介绍 HDFS 是 Hadoop Distribute File System 的简称，

【异常】TypeError: WebDriver.__init__() got an unexpected keyword argument ‘executable_path‘

本本本添哥

12-18

1770

如果你选择了不直接指定驱动路径的方式，那么请确认 ChromeDriver 的位置已经添加到了系统的 PATH 环境变量中。此外，Selenium Manager 已经集成到了 Selenium 中，它可以在不需要显式提供驱动路径的情况下自动管理驱动程序的安装和配置。：有时，即使路径正确，如果 ChromeDriver 文件没有执行权限，也会导致无法启动浏览器。通过上述调整，你应该能够解决当前遇到的问题，并顺利运行 Selenium 测试脚本。：根据你提供的代码片段和错误信息，Selenium 的。

TypeError MyFAISS.similarity_search_with_score_by_vector got unexpected keyword argument filter解决方案

weixin_43178406的博客

06-27

7万+

本文主要介绍了TypeError: MyFAISS.similarity_search_with_score_by_vector() got an unexpected keyword argument 'filter’解决方案，希望能对使用faiss的同学们有所帮助。文章目录 1. 问题描述 2. 解决方案

Pytorch报urllib.error.URLError: ＜urlopen error [SSL: CERTIFICATE_VERIFY_FAILED]错误

weixin_44901043的博客

04-03

8291

问题描述在调用torchvision.datasets.CIFAR10下载数据集的过程中， trainset = torchvision.datasets.CIFAR10(root='./data', train=True, download=True, transform=transform) 报如下错误： Traceback (most recent call last): File "D:/pythonCode/pytorch/Learn_Torchvision/Leran_datasets

mahout算法源码分析之Itembased Collaborative Filtering实战

445822357

10-10

207

Mahout版本：0.7，hadoop版本：1.0.4，jdk：1.7.0_25 64bit。本系列介绍介绍mahout中的Itembased Collaborative Filtering算法，这个算法的实现的源码是org.apache.mahout.cf.taste.hadoop.item.RecommenderJob。在mahout官网是这样介绍这个算法的：RecommenderJob是...

Hadoop学习-HDFS

空城的博客

07-04

447

Hdfs学习总结

深入理解mahout基于hadoop的协同过滤流程

mach_learn的专栏

11-13

2444

最近做mahout itembased collaborative filtering项目，今天把mahout 协同过滤的流程进行了一下梳理，以便能够更好了解mahout itembased协同过滤设计方式，以及能够对mahout itembased协同过滤源码进行修改。分享一下，希望对大家有所帮助。

mahout 推荐参数

godspeedlaile9的专栏

08-19

1023

org.apache.mahout.cf.taste.Hadoop.item.RecommenderJob。其输入数据放在默认输入目录下，使用mapred.input.dir参数指定的输入数据，是userID,itemID[,preferencevalue]值对形成的文本文件。可以有多个文件存放在该目录下。运行时相关参数如下： numRecommendations：为每个用户产生的推

距离度量以及python实现(一)

weixin_33920401的博客

06-16

1378

1. 欧氏距离(Euclidean Distance) 欧氏距离是最易于理解的一种距离计算方法，源自欧氏空间中两点间的距离公式。 (1)二维平面上两点a(x1,y1)与b(x2,y2)间的欧氏距离： (2)三维空间两点a(x1,y1,z1)与b(x2,y2,z2)间的欧氏距离： (3)两个n维向量a(x11,x12,…,x1n)与 b(x21,x22,…,x2n)...

Hadoop实现AbstractJob简化Job设置

星.云计算

09-10

402

在hadoop中编写一个job一般都是采用下面的方式： Job job=new Job(); job.setXxx(); ...这样感觉代码很多，而且参数还不好控制。比如，我想对输入的参数进行控制，还要自己写一些控制解析之类的代码，如下： if(args.length!=2){ System.err.out("Usage<input> <output>") ...

mahout算法canopy源码分析之一：获得输入数据

星.云计算

07-21

153

对于canopy的输入数据需要的形式为序列文件，同时保证key：Text、value：VectorWritable。昨晚准备打算使用单纯的java程序搞定输入数据的准备，无奈老是会出点问题，昨晚的问题“找不到文件”暂时还没找到原因。其实如果只是要获得输入数据那么，可以使用mahout官网提供的方法在得到了序列的*.txt文件后直接把mahout-distribution-0.7.zip...

hadoop编译找不到类解决方法

lyxuan1208的博客

11-18

4023

Mahout算法解析与案例实战P32页的代码编译运行报错，提示找不到类： Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/mahout/common/AbstractJob at java.lang.ClassLoader.defineClass1(Native Method) at java

Error: file: __MACOSX/miniprogram_npm/tdesign-miniprogram/check-tag/._props.js unknown: Unexpected character ''. (1:0) [0m[31m