Ce este rangul reciproc mediu (MRR) și unde este utilizat în evaluarea căutărilor?

Rangul Reciprocal Mediu (MRR) este o metrică pentru evaluarea calității sistemelor de căutare și recomandare. Măsoară media valorii reciproce a poziției primului rezultat relevant din lista de rezultate pentru un set de interogări.

Formula:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

unde (Q) reprezintă numărul de interogări, iar (rank_i) este poziția primului rezultat relevant pentru interogarea i.

MRR este utilizat în sarcinile de căutare a informațiilor, inclusiv pentru evaluarea modelelor bazate pe NLP și embedding-uri, pentru a înțelege cât de rapid primește utilizatorul un răspuns relevant. Cu cât MRR este mai mare (mai aproape de 1), cu atât calitatea căutării este mai bună.