原文:[LTR] 信息检索评价指标(RP/MAP/DCG/NDCG/RR/ERR)

一 RP R recall 表示召回率 查全率,指查询返回结果中相关文档占所有相关文档的比例 P precision 表示准确率 精度,指查询返回结果中相关文档占所有查询结果文档的比例 则 PR 曲线呈现出负相关的下降趋势 一般来说,recall 和 precision 反映了模型性能的两个方面,单一依靠某个指标并不能较为全面的评价一个模型的性能。 此时引入F Score F measure 作为 ...

2018-03-29 23:37 1 6367 推荐指数:

查看详情

信息检索中的各项评价指标

信息检索评价是对信息检索系统性能(主要满足用户信息需求的能力)进行评估的活动。通过评估可以评价不同技术的优劣,不同因素对系统的影响,从而促进本领域研究水平的不断提高。信息检索系统的目标是较少消耗情况下尽快、全面返回准确的结果。 IR的评价指标,通常分为三个方面:(1)效率(Efficiency ...

Sat Jan 09 00:02:00 CST 2016 0 5229
信息检索————NDCG计算

先贴代码,原理有时间补上。 代码中两种方式实现了ndcg的计算,调用的时候需要注意一下。 ...

Sat Apr 25 00:18:00 CST 2020 0 903
信息检索评价方法

测试数据集 一个文档集 一组用于测试的信息需求集合,信息需求可以表示为查询 一组相关性判定结果,对应每个查询-文档,通常会赋予一个二值判定结果: 相关/不相关 经验发现一般测试的查询数应>=50。 无序检索结果的评价 准确率和召回率 对于一个查询,根据其返回 ...

Tue May 09 23:49:00 CST 2017 0 1810
搞懂推荐系统中的评价指标NDCG(CG、DCG、IDCG)

这些指标都是衡量搜索引擎算法的指标。搜索引擎一般采用PI(peritem)的方式进行评测,简单地说就是逐条对搜索结果进行分等级的打分。假设我们现在在Google上搜索一个词,然后得到5个结果。我们对这些结果进行3个等级的区分:Good(好)、Fair(一般)、Bad(差),然后赋予他们分值分别为 ...

Sun Jun 14 09:00:00 CST 2020 1 2527
IR的评价指标-MAP,NDCG和MRR

MAP(Mean Average Precision): 单个主题的平均准确率是每篇相关文档检索出后的准确率的平均值。主集合的平均准确率(MAP)是每个主题的平均准确率的平均值。MAP 是反映系统在全部相关文档上性能的单值指标。系统检索出来的相关文档越靠前(rank 越高),MAP就可能越高 ...

Fri Aug 16 23:21:00 CST 2013 0 10199
IR的评价指标-MAP,NDCG和MRR

IR的评价指标-MAP,NDCG和MRR MAP(Mean Average Precision): 单个主题的平均准确率是每篇相关文档检索出后的准确率的平均值。主集合的平均准确率(MAP)是每个主题的平均准确率的平均值。MAP 是反映系统在全部相关文档上性能的单值 ...

Mon Jan 18 19:48:00 CST 2016 1 3975
搜索评价指标——NDCG

直接翻译为归一化折损累计增益,可能有些晦涩,没关系下面重点来解释一下这个评价指标。这个指标通常是用来衡量 ...

Fri Aug 03 04:02:00 CST 2018 5 31390
Learning to Rank for IR的评价指标MAP,NDCG,MRR

MAP(Mean Average Precision):单个主题的平均准确率是每篇相关文档检索出后的准确率的平均值。主集合的平均准确率(MAP)是每个主题的平均准确率的平均值。MAP 是反映系统在全部相关文档上性能的单值指标。系统检索出来的相关文档越靠前(rank 越高),MAP就可能越高 ...

Sun Feb 26 04:35:00 CST 2012 3 27734
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM