什么是11pt平均精度指标？

Question

我有两个问题

1-什么是"11pt平均精度度量"？

2-如何在信息检索中使用它？

谢谢

Answer 1

这主要来自Christopher D. Manning,Prabhakar Raghavan和HinrichSchütze的" 信息检索简介 " 一书.

在排名检索中,您可以获得精确度和召回率.精确度是系统返回的文档的准确程度(1.0表示它只返回相关文档).召回是系统找到的相关文件的百分比(1.0表示它们全部找到).因此,您可以通过返回越来越多的文档来调整系统的调用,但是需要进行精确折衷,因为您可能会承认更多错误.

内插精度是您选择召回级别r和所有召回级别P(r')> = P(r)的位置,其中P(r)是等级的精度r.这是您可以达到的最佳精度.

然后在11-pt插值平均精度中,您将查看11个调用级别(0.0,0.1,0.2,...,1.0)并在每个点找到插值精度.您可以在所有不同的查询或信息需求中平均这些分数(如Manning&Schuetze的书中所述)来查找系统的分数.

信息检索中的典型用法是用于评估.它可以帮助您将一个系统与另一个系统进行比较,但它确实有助于您在调整参数时比较系统的变化情况.更改此设置是否会改善或损坏我的11-pt interp avg prec？它的好处是,它可以测量您收藏中的所有信息需求,因此有助于为您提供"全局"视图.但是,要小心过度依赖这些指标,因为它们只与您使用的评估集一样好.

Answer 2

这里有一本在线书《信息检索简介》
，其中有关于 11 点插值平均精度使用、排名检索结果评估的参考。