Τι είναι το Αντίστροφο Βαθμολόγιο Προσδοκίας στο LTR;

Η Αντίστροφη Βαθμολογία Προσδοκίας (IPS) στο Learning to Rank (LTR) είναι μια μέθοδος διόρθωσης των μεροληψιών στα δεδομένα που προκύπτουν επειδή τα κλικ των χρηστών εξαρτώνται όχι μόνο από τη σχετικότητα, αλλά και από τη θέση ή άλλους παράγοντες. Το IPS χρησιμοποιείται για την αξιολόγηση της ποιότητας της κατάταξης βάσει των κλικ, αντισταθμίζοντας την ανισοκατανομή των πιθανοτήτων κλικ.

Η ιδέα είναι ότι κάθε κλικ ζυγίζεται αντιστρόφως ανάλογα με την πιθανότητα ο χρήστης να δει και να κάνει κλικ σε αυτό το στοιχείο (προσδοκία). Έτσι, τα κλικ σε θέσεις με χαμηλή πιθανότητα κλικ λαμβάνουν μεγαλύτερο βάρος, βοηθώντας στην επίτευξη πιο δίκαιης αξιολόγησης του μοντέλου.

Παράδειγμα: αν η πιθανότητα κλικ στη θέση 1 είναι 0.8 και στη θέση 5 είναι 0.2, τότε το κλικ στη θέση 5 θα ζυγίζεται με μεγαλύτερο βάρος για να αντισταθμίσει τη μικρότερη πιθανότητα να παρατηρηθεί.

Αυτό επιτρέπει την εκπαίδευση μοντέλων κατάταξης βάσει των παρατηρηθέντων κλικ, ελαχιστοποιώντας την προκατάληψη που προκαλείται από τη θέση ή άλλους παράγοντες.