Какво е средният реципрочен ранг (MRR) и къде се използва при оценка на търсенето?

Среден обратен ранг (MRR) е метрика за оценка на качеството на системите за търсене и препоръки. Тя измерва средната стойност на обратното на позицията на първия релевантен резултат в списъка с резултати за набор от заявки.

Формула:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

където (Q) е броят на заявките, а (rank_i) е позицията на първия релевантен резултат за i-та заявка.

MRR се използва в задачи за информационно търсене, включително при оценка на модели на базата на NLP и ембединг, за да се разбере колко бързо потребителят получава релевантен отговор. Колкото по-висок е MRR (по-близо до 1), толкова по-добро е качеството на търсенето.