【recbole】运用recbole库进行机器学习训练时KeyError: ‘mrr@10‘

最新推荐文章于 2024-08-23 00:48:25 发布
最新推荐文章于 2024-08-23 00:48:25 发布
阅读量316 收藏
点赞数 2
文章标签： 机器学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/chriix/article/details/137354238
版权
本文解释了在validmetric中遇到的报错，原因在于选择的k值超出了topk范围。解决办法是确保validmetric中的选项在topk列表内，如topk包含5、10、20、50和100时，validmetric才能选择这些值。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

【报错信息】：

【解决方法】：

这个报错是因为我们在valid metric中选择了k=10，但是topk中没有10这个值，则无法这样设定。

例如：在topk中包含5，10，20，50，100，则valid metric可以在这五个值中选择，如果topk=5，则valid_metric只能选择5.

heliium
关注
python的 MAP, RPrec, MRR, NDCG, MRR@10 计算代码
Talk Is Cheap
08-09 5897
import numpy as np def average_precision(gt, pred): """ Computes the average precision. This function computes the average prescision at k between two lists of items. Parameters ------...
《AI Agent 开发实战》第10章: 智能推荐 Agent 开发
最新发布
AI天才研究院
10-30 678
第10章: 智能推荐 Agent 开发 在这个信息爆炸的时代，智能推荐系统已经成为我们日常生活中不可或缺的一部分。从电子商务平台推荐商品，到视频网站推荐内容，再到音乐应用推荐歌曲，智能推荐系统无处不在。作为AI Agent的一个重要应用领域，智能推荐系统结合了机器学习、数据挖掘和信息检索等多个领域的技术，旨在为用户提供个性化、
RecBole安装遇到的坑
weixin_42077456的博客
10-21 1790
RecBole安装遇到的坑，包括安装和使用的过程
评价指标reacll@10,mrr@10,ndcg@10,hit@10的含义
wcc8848的博客
02-25 1万+
在知识图谱补全和推荐系统中常用到recall,mrr,ndcg,hit的评价指标 知识图谱补全也成为链接预测，是用来预测三元组（h，r，t）中缺失实体h，t或r的任务，对于每一个缺失的实体，模型将被要求用所有的知识图谱中的实体作为候选项进行计算， 在测试阶段，对于每个待测试三元组，用知识图谱中的除去h与t之外的其他实体作为候选项来替换头实体或尾实体，并且按大小顺序给出这些实体的评分函数f_r。 还是按照上述进行f函数值排列，然后去看每个testing triple正确答案是否排在序列的前十，如果在的话
知识图谱补全中MRR指标低而Hits@10高反映了什么
weixin_44466434的博客
07-25 1524
1
复旦大学AI团队：检索增强生成最佳实践搜索
m0_59164304的博客
07-23 1440
检索结果可能包含冗余或不必要的信息，可能会阻止LLMs生成准确的响应。此外，长提示可能会减慢推理过程。因此，在RAG管道中，总结检索文档的有效方法至关重要。摘要任务可以是抽取式的或生成式的。抽取式方法将文本分段成句子，然后根据重要性对其进行评分和排序。生成式压缩器从多个文档中合成信息，重新表述并生成一个连贯的摘要。这些任务可以是基于查询的或非基于查询的。在这篇论文中，由于RAG检索与查询相关的信息，我们专注于基于查询的方法。1.Recomp: Recomp [23] 具有抽取和生成压缩器。
企业应对数据泄露风险——应用强化学习进行用户画像及行为预测
AI天才研究院
08-03 1077
随着互联网技术的不断革新、数据量的增长、用户数据的爆炸式增长以及移动端渗透率的上升等因素的影响，安全行业也迎来了新的挑战。近年来的数据泄露事件层出不穷，社会各界对此事的重视程度也是逐步提升。所以，对个人信息的保护成为一个必然的问题。本文将讨论如何使用强化学习技术解决企业面临的数据泄露问题。数据泄露通常分为两种类型:第一类是敏感数据泄露，即内部人员或个人信息（如身份证号码、手机号码、信用卡号、银行卡号）被非授权访问、窃取、利用；
Recommendation Based on Knowledge Graphs: 如何从海量的用户数据中有效地获取有效的信息并对之进行推荐?
AI天才研究院
08-03 783
推荐系统（Recommendation System）是互联网领域经典的应用场景。它是指根据用户在特定信息环境中的兴趣和偏好，自动向其推荐符合其需要的内容或服务。推荐系统也被称为个性化推荐、上下文推荐、多样化推荐等。例如，Amazon的“大家都喜欢”功能就是一种基于推荐系统的推荐策略。随着移动互联网的普及和传播力度的增加，社交网络中“共同喜好的人”已经成为一种流行的推荐方式。但是，如何从海量的用户数据中有效地获取有效的信息并对之进行推荐依然是一个难题。
【人工智能】项目实践和案例分析：使用TensorFlow制作商品推荐系统
weixin_51306394的博客
08-23 1381
本项目旨在构建一个基于TensorFlow的商品推荐系统，该系统将利用用户的历史购买记录和商品信息来预测用户对潜在商品的偏好，并据此进行推荐。推荐系统在现代电商平台中至关重要，能有效提升用户体验和增加销售额。
MySQL实战45讲学习笔记
baidu_26296695的博客
09-30 2070
文章目录MySQL实战45讲-学习笔记01 基础架构：一条SQL查询语句是如何执行的？mysql逻辑架构连接器查询缓存分析器优化器执行器02 日志系统：一条SQL更新语句如何执行redo logbinlog执行器和InnoDB引擎在执行update语句时的内部流程两阶段提交一周一备vs一天一备03 事务隔离隔离级别事务的启动方式04 深入浅出索引（上）常见的索引模型（数据结构）哈希表有序数组搜索树InnoDB的索引模型B+树索引的维护哪些场景用自增主键05 深入浅出索引（下）覆盖索引联合索引的字段顺序索引下
KGE性能指标：MRR，MR，HITS@1，HITS@3，HITS@10
热门推荐
飞机火车巴雷特的博客
09-12 4万+
知识图谱MRR，MR，HITS@1，HITS@3，HITS@10的含义、计算方法
信息检索IR评价中常见的评价指标-MAP\NDCG\ERR\P@10等
古月哲亭
04-16 7462
信息检索评价是对信息检索系统性能（主要满足用户信息需求的能力）进行评估的活动。通过评估可以评价不同技术的优劣，不同因素对系统的影响，从而促进本领域研究水平的不断提高。信息检索系统的目标是较少消耗情况下尽快、全面返回准确的结果。 IR的评价指标，通常分为三个方面： （1）效率(Efficiency)—可以采用通常的评价方法：时间开销、空间开销、响应速度。 （2）效果(Effectiveness)：返...
【模型评价指标】python的 MAP, RPrec, MRR, NDCG, MRR@10 计算代码_机器学习
KaelCui的博客
07-27 1706
参考
信息检索P@10、MAP、NDCG，及同一指标计算的差别
more_ugly_less_bug的博客
01-16 4万+
问题源于我在重现一篇信息检索方面顶会论文实验的时候，始终计算不出与论文中相同的实验结果。论文的实验用到了P@10，MAP,NDCG@10三种指标。我先是用了Galago提供的计算工具，发现除P@10一项指标结果一致外，MAP,NDCG@10两项都有很大的不同。经过观察发现虽然实验结果的数据不同，但是实验结果的趋势是相同的（实验是对几种排名算法进行评比，尽管得到了不同的数据，但是用这些数...
MAP 与 MRR
独钓寒江雪
03-20 1万+
看论文时，发现对于wikiqa的评价指标常设为MAP、MRR这些Rank排序的指标，不是很理解，看了下面这篇博客有些理解了http://blog.youkuaiyun.com/lightty/article/details/47079017 在MAP中，四个文档和query要么相关，要么不相关，也就是相关度非0即1。MAP(Mean Average Precision)：单个主题的平均准确率是每篇相关文档检索...
Rm@i,P@i,MAP,MRR
chuan的专栏
07-10 1054
Rm@i Let { Precision@K Set a rank threshold K Compute % relevant in top K Ignores documents ranked lower than K Ex: Prec@3 of 2/3 Prec@4 of 2/4 Prec@5 of 3/5 Mean Average Precision ...
IR的评价指标-MAP，MRR和NDCG的形象理解
anshuai_aw1的博客
10-17 9640
一 、MAP(Mean Average Precision)： 单个主题的平均准确率是每篇相关文档检索出后的准确率的平均值。主集合的平均准确率(MAP)是每个主题的平均准确率的平均值。MAP 是反映系统在全部相关文档上性能的单值指标。系统检索出来的相关文档越靠前(rank 越高)，MAP就可能越高。如果系统没有返回相关文档，则准确率默认为0。 只有1和0，1代表相关，0代表不相关。 例如：假...
mrr2c工具：转换MRR-2雷达数据至NetCDF格式
资源摘要信息: "本资源主要介绍了如何将Metek MRR-2微型雨雷达数据文件转换为NetCDF格式，使用的是一个名为mrr2c的开源程序。Metek MRR-2是一种用于气象观测的微型雷达，能够测量降雨的微物理属性。该资源也提供了...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值