Τι είναι η περιστρεφόμενη κανονικοποίηση;

Η pivoted normalization είναι μια μέθοδος κανονικοποίησης στην αναζήτηση πληροφοριών που προσαρμόζει την αξιολόγηση της σχετικότητας των εγγράφων λαμβάνοντας υπόψη το μήκος τους. Η ιδέα είναι να αποφευχθεί η μεροληψία υπέρ πολύ μακρών ή πολύ κοντών εγγράφων.

Σε κλασικά μοντέλα όπως το BM25, το μήκος του εγγράφου επηρεάζει την αξιολόγηση, και η pivoted normalization εισάγει μια παράμετρο που ονομάζεται pivot (συνήθως ο μέσος όρος μήκους εγγράφου στη συλλογή), γύρω από την οποία πραγματοποιείται η κανονικοποίηση. Ο τύπος είναι συνήθως:

NormalizedLength = (1 - slope) * pivot + slope * actualLength

όπου το slope είναι μια παράμετρος που ρυθμίζει το βαθμό της κανονικοποίησης.

Αυτό βοηθά στην εξισορρόπηση της επίδρασης του μήκους του εγγράφου στη σχετικότητα, βελτιώνοντας την ποιότητα της κατάταξης στις μηχανές αναζήτησης.