Qu'est-ce que la normalisation pivotée ?
sobes.tech IA
Réponse de l'IA
La normalisation pivotée est une méthode de normalisation dans la recherche d'informations qui ajuste l’évaluation de la pertinence des documents en tenant compte de leur longueur. L’idée est d’éviter un biais en faveur de documents trop longs ou trop courts.
Dans les modèles classiques comme BM25, la longueur du document influence l’évaluation, et la normalisation pivotée introduit un paramètre appelé pivot (généralement la longueur moyenne du document dans la collection), autour duquel la normalisation est effectuée. La formule est généralement la suivante :
NormalizedLength = (1 - slope) * pivot + slope * actualLength
où slope est un paramètre qui régule le degré de normalisation.
Cela aide à équilibrer l’impact de la longueur du document sur la pertinence, améliorant la qualité du classement dans les moteurs de recherche.