Маъруфи Jelinek-Mercer чист кардан чист?

Jelinek-Mercer шингилӣ — ин усулест барои шингил кардани эҳтимолиятҳо дар моделҳои забонӣ, ки барои ҳалли масъалаи эҳтимолияти сифр дар ибораҳои камёфту ё нодида истифода мешавад. Ин асос ёфтааст ба интерполясияи хаттӣ аз тахминҳои эҳтимолият аз моделҳои бештар мушаххас ва умумӣ.

Ҳикоя ин аст, ки эҳтимолияти калима дар контекст ҳамчун ҷамъбасти вазнноки эҳтимолиятҳо аз моделҳои мушаххас (масалан, биграмҳо) ва моделҳои умумӣ (масалан, unigramҳо) ҳисоб карда мешавад. Вазн (лямбда) муайян мекунад, ки мо ба кадом модел бештар бовар дорем.

Формула:

P_{JM}(w_i|w_{i-1}) = \lambda P_{ML}(w_i|w_{i-1}) + (1 - \lambda) P_{ML}(w_i)

ки дар он:

• (P_{ML}) тахмини эҳтимолияти максималӣ (MLE),
• (\lambda) параметри шингилкунӣ (0 ≤ (\lambda) ≤ 1).

Ин кӯмак мекунад, ки эҳтимолиятҳои сифр пешгирӣ шаванд ва сифати модели забонро беҳтар гардонад, махсусан дар кор бо маълумоти маҳдуд.