Ortalama Ters Çekim Sırası (MRR) nedir ve arama değerlendirmesinde nerede kullanılır?

Ortalama Ters Rank (MRR), arama ve öneri sistemlerinin kalitesini değerlendiren bir metriktir. Bir sorgu kümesi için ilk ilgili sonucun listede bulunduğu pozisyonun tersinin ortalamasını ölçer.

Formül:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

burada (Q) sorgu sayısıdır ve (rank_i) i-ıncı sorgu için ilk ilgili sonucun pozisyonudur.

MRR, bilgi erişimi görevlerinde, NLP ve gömme temelli modellerin değerlendirilmesinde kullanılır ve kullanıcının ilgili cevabı ne kadar hızlı aldığına dair bir anlayış sağlar. MRR ne kadar yüksekse (1'e yakınsa), arama kalitesi o kadar iyidir.