Ce este normalizarea pivotată?

Normalizarea pivotată este o metodă de normalizare în căutarea informațiilor care ajustează evaluarea relevanței documentelor ținând cont de lungimea lor. Ideea este de a evita biasul în direcția documentelor prea lungi sau prea scurte.

În modelele clasice precum BM25, lungimea documentului influențează evaluarea, iar normalizarea pivotată introduce un parametru numit pivot (de obicei lungimea medie a documentului în colecție), în jurul căruia are loc normalizarea. Formula de obicei arată astfel:

NormalizedLength = (1 - slope) * pivot + slope * actualLength

unde slope este un parametru care reglează gradul de normalizare.

Acest lucru ajută la echilibrarea influenței lungimii documentului asupra relevanței, îmbunătățind calitatea clasamentului în motoarele de căutare.