Τι είναι ο μέσος αναλογικός βαθμός (MRR) και πού χρησιμοποιείται στην αξιολόγηση αναζήτησης;

Ο Μέσος Αναστρέψιμος Κατάταξη (MRR) είναι ένα μέτρο αξιολόγησης της ποιότητας των συστημάτων αναζήτησης και σύστασης. Μετράει τον μέσο αντίστροφο της θέσης του πρώτου σχετικού αποτελέσματος στη λίστα αποτελεσμάτων για ένα σύνολο ερωτημάτων.

Τύπος:

[ MRR = \frac{1}{Q} \sum_{i=1}^Q \frac{1}{rank_i} ]

όπου (Q) είναι ο αριθμός των ερωτημάτων και (rank_i) η θέση του πρώτου σχετικού αποτελέσματος για το i-ο ερώτημα.

Ο MRR χρησιμοποιείται σε εργασίες αναζήτησης πληροφοριών, συμπεριλαμβανομένης της αξιολόγησης μοντέλων βασισμένων σε NLP και ενσωματώσεις, για να κατανοήσει πόσο γρήγορα λαμβάνει ο χρήστης μια σχετική απάντηση. Όσο υψηλότερο είναι το MRR (πιο κοντά στο 1), τόσο καλύτερη είναι η ποιότητα της αναζήτησης.