MRR 推薦演算法評價指標

2021-10-09 16:23:45 字數 424 閱讀 8463

平均倒數排名(mean reciprocal rank, mrr)是乙個國際上通用的對搜尋演算法進行評價的機制。

描述

結果列表中,第乙個結果匹配,分數為1,第二個匹配分數為0.5,第n個匹配分數為1/n,如果沒有匹配的句子分數為0。最終的分數為所有得分之和,再求平均

數學形式

正確檢索結果值在檢索結果中的排名來評估檢索系統的效能。

其中,舉例

假如檢索三次的結果如下,需要的結果(cat,torus,virus)分別排在3,2,1的話,此系統地mrr為(1/3 + 1/2 + 1)/3 = 11/18

IR的評價指標 MAP,NDCG和MRR

單個主題的平均準確率是每篇相關文件檢索出後的準確率的平均值。主集合的平均準確率 map 是每個主題的平均準確率的平均值。map 是反映系統在全部相關文件上效能的單值指標。系統檢索出來的相關文件越靠前 rank 越高 map就可能越高。如果系統沒有返回相關文件,則準確率預設為0。例如 假設有兩個主題,...

IR的評價指標 MAP,NDCG和MRR

單個主題的平均準確率是每篇相關文件檢索出後的準確率的平均值。主集合的平均準確率 map 是每個主題的平均準確率的平均值。map 是反映系統在全部相關文件上效能的單值指標。系統檢索出來的相關文件越靠前 rank 越高 map就可能越高。如果系統沒有返回相關文件,則準確率預設為0。例如 假設有兩個主題,...

評價推薦系統指標

評價指標 名稱符號 偏好是否依賴於推薦列表長度備註準 確度 評分準確度 平均絕對誤差 mae 小否 適用於比較關注精確的 評分的系統 平均平方誤差 mse 小均方根誤差 rmse 小 標準平均絕對誤差 nmae 小 評分關聯 pearson關聯 pcc 大適用於不關注精確 評分的系統,其中ndmp適...