MRR(Mean Reciprocal Rank)平均倒排序值
Mean reciprocal rank(MRR)平均倒排序值
把标准答案在模型给出结果的排序位置的倒数作为它的准确度,再对所有的问题求平均。
MRR是一种推荐系统的评价指标,是将标准答案在被推荐系统给出结果中的排序取倒数作为它的准确度,再对所有的问题取平均得到的指标。MRR方法主要用于寻址类检索或问答类检索。以下图为例,有3个query,系统给出的结果在results列,标准答案在correct列,因此这个系统的MRR值为:(1/3 + 1/2 + 1)/3 = 11/18=0.61。