问答系统评测方法

平均排序倒数

平均排序倒数(Mean Reciprocal Rank,简称MRR)是一个国际上通用的对搜索算法进行评价的机制,即将第一个结果匹配,分数为1,第二个匹配分数为0.5,第n个匹配分数为1/n,如果没有匹配的句子分数为0。最终的分数为所有得分之和。

公式如下:



信赖加权评分



查准率



查全率



调和平均数

其中β是参数,P是查准率,R是查全率,当参数β=1时,就是常见的F1-Measure了:


猜你喜欢

转载自blog.csdn.net/thelostlamb/article/details/79342382