Kas yra ROUGE ir kuo skiriasi ROUGE-L nuo ROUGE-N?

ROUGE (Recall-Oriented Understudy for Gisting Evaluation) yra metrikų rinkinys, skirtas automatinio santraukų ir teksto generavimo kokybei įvertinti, lyginant sugeneruotą tekstą su standartiniu.

• ROUGE-N matuoja n-gramų (sekų iš n žodžių) sutapimus tarp sugeneruoto ir standartinio teksto. Pavyzdžiui, ROUGE-1 – atitiktis atskiriems žodžiams, ROUGE-2 – žodžių poroms.

• ROUGE-L remiasi ilgiausios bendros sekos (Longest Common Subsequence, LCS) ilgiu tarp dviejų tekstų. Jis atsižvelgia į žodžių tvarką, bet nereikalauja, kad jie būtų nuoseklūs.

Taip, ROUGE-N sutelkiamas į tikslius n-gramų atitikimus, o ROUGE-L – į lankstesnius sekų atitikimus, kas padeda įvertinti struktūros ir prasmės išsaugojimo kokybę.