Kas ir vidējais atgriezeniskās kārtības rangs (MRR) un kur tas tiek izmantots meklēšanas novērtēšanā?

Vidējais atpakaļejošais reitings (MRR) ir metriks, ko izmanto meklēšanas un ieteikumu sistēmu kvalitātes novērtēšanai. Tas mēra vidējo atpakaļejošo vērtību pirmā relevanta rezultāta pozīcijai rezultātu sarakstā konkrētā pieprasījumu kopā.

Formula:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

kur (Q) ir pieprasījumu skaits, un (rank_i) ir pirmā relevanta rezultāta pozīcija i-tajā pieprasījumā.

MRR tiek izmantots informācijas meklēšanas uzdevumos, tostarp NLP un iekļaušanas modeļu novērtēšanā, lai saprastu, cik ātri lietotājs saņem relevantu atbildi. Jo augstāks MRR (tuvu 1), jo labāka ir meklēšanas kvalitāte.