Kas yra vidutinis atvirkštinis reitingas (MRR) ir kur jis naudojamas paieškos vertinimui?

Vidutinis atvirkštinis reitingas (MRR) yra matas, naudojamas vertinant paieškos ir rekomendacijų sistemas. Jis matuoja vidutinę pirmojo svarbaus rezultato pozicijos atvirkštinę reikšmę rezultatų sąraše užklausų rinkiniui.

Formulė:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

kur (Q) yra užklausų skaičius, o (rank_i) yra pirmojo svarbaus rezultato pozicija i-joje užklausoje.

MRR naudojamas informacijos paieškos užduotyse, įskaitant NLP ir įdėjų pagrindu sukurtų modelių vertinimą, siekiant suprasti, kaip greitai vartotojas gauna svarbų atsakymą. Kuo aukštesnis MRR (artimesnis 1), tuo geresnė paieškos kokybė.