检索用的指标

本文指标定义来自于最近看的文献https://arxiv.org/pdf/2004.03588.pdf,文章是做基于检索的回复生成的。

1.R_n@k

R指的是Recall,即召回率。该指标指的是从n个候选当中选择k个,在所选的k个上计算召回率。

2.MAP(mean average precision)

在豆瓣的语料库上定义的平均准确率,没有像上面的定义n和k,可能是语料库里规定了n和k(不太确定)。

3.MRR(mean reciprocal rank)

可参考MRR(Mean Reciprocal Rank)笔记_fu_gui_mu_dan的博客-CSDN博客_mrr 推荐系统文章,其实就是对于我们将检索结果的评分进行排序后,看正确的结果在评分的第n个位置,那么PR就为\frac{1}{n},最终再取平均值。

4.precision-at-one (P@1)

指的是从候选当中只选1个,然后计算精确度(最终也要取平均)。

你可能感兴趣的:(人工智能)