Čo je priemerné reciproké poradie (MRR) a kde sa používa pri hodnotení vyhľadávania?

Priemerný recipročný poradie (MRR) je metrika na hodnotenie kvality vyhľadávacích a odporúčacích systémov. Meria priemernú hodnotu inverznej pozície prvého relevantného výsledku v zozname výsledkov pre súbor dopytov.

Vzorec:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

kde (Q) je počet dopytov a (rank_i) je pozícia prvého relevantného výsledku pre i-ty dopyt.

MRR sa používa v úlohách vyhľadávania informácií, vrátane hodnotenia modelov založených na NLP a vkladaniach, aby sa pochopilo, ako rýchlo používateľ získa relevantnú odpoveď. Čím je MRR vyšší (bližšie k 1), tým je kvalita vyhľadávania lepšia.