Kas ir ROUGE un kā atšķiras ROUGE-L no ROUGE-N?

ROUGE (Recall-Oriented Understudy for Gisting Evaluation) ir metrikas kopums, kas paredzēts automātiskās kopsavilkumu un teksta ģenerēšanas kvalitātes novērtēšanai, salīdzinot ģenerēto tekstu ar referenci.

• ROUGE-N mēra n-gramu (n vārdu secību) sakritības starp ģenerēto un referenču tekstu. Piemēram, ROUGE-1 par atbilstību atsevišķiem vārdiem, ROUGE-2 par vārdu pāriem.

• ROUGE-L balstās uz garākās kopīgās secības (Longest Common Subsequence, LCS) garumu starp diviem tekstiem. Tas ņem vērā vārdu kārtību, bet neprasa, lai tie būtu tieši secīgi.

Tādējādi, ROUGE-N koncentrējas uz precīzām n-gramu sakritībām, bet ROUGE-L uz elastīgākām secību sakritībām, kas palīdz novērtēt struktūras un nozīmes saglabāšanas kvalitāti.