BM25 nima va qaysi parametrlar (k1, b)?

BM25 (Eng Yaxshi Mos Kelish 25) — bu maʼlumotlarni qidirishda mashhur reyting funktsiyasi bo‘lib, ehtimollik modeliga asoslangan. U hujjatning so‘rovga mosligini, terminlarning chastotasi va hujjat uzunligini hisobga olgan holda baholaydi.

Asosiy parametrlar:

• k1 — hujjatda termin chastotasining taʼsirini nazorat qiluvchi koeffitsient. K1 qanchalik yuqori bo‘lsa, termin chastotasining oshishi shunchalik kuchli hisobga olinadi, ammo kamayib boruvchi daromadlar bilan.
• b — hujjat uzunligini normallashtirish parametri. 0 dan 1 gacha bo‘lgan qiymat, bunda 0 normallashtirish yo‘qligini, 1 esa hujjat uzunligiga to‘liq normallashtirishni anglatadi.

BM25 formulasi hujjatda termin chastotasini, kolleksiyadagi teskari termin chastotasini va hujjat uzunligini hisobga olib, bu omillarning yakuniy ballga taʼsirini muvozanatlaydi.

Qidiruv tizimida foydalanish misoli: BM25 foydalanuvchining so‘roviga eng mos hujjatlarni aniqlashga yordam beradi, hujjatda tez-tez uchraydigan terminlar muhimroq bo‘lib, juda uzun hujjatlar esa adolatsiz ustunlikka ega bo‘lmaydi.