Kas yra pivoted normalizacija?

Pivoted normalization yra normalizacijos metodas informacijos paieškoje, kuris koreguoja dokumentų aktualumo įvertinimą atsižvelgiant į jų ilgį. Idėja yra išvengti per didelio arba per mažo dokumentų ilgio šališkumo.

Klasikiniuose modeliuose, kaip BM25, dokumento ilgis veikia įvertinimą, ir pivoted normalization įveda parametrą, vadinamą pivot (dažniausiai vidutinį dokumento ilgį kolekcijoje), aplink kurį vyksta normalizacija. Formulė dažniausiai atrodo taip:

NormalizedLength = (1 - slope) * pivot + slope * actualLength

Kur slope yra parametras, reguliuojantis normalizacijos laipsnį.

Tai padeda subalansuoti dokumento ilgio įtaką ir pagerinti reitingo kokybę paieškos sistemose.