Wat is ROUGE en hoe verschilt ROUGE-L van ROUGE-N?

ROUGE (Recall-Oriented Understudy for Gisting Evaluation) is een set van metrics voor het beoordelen van de kwaliteit van automatische samenvattingen en tekstgeneratie, door de gegenereerde tekst te vergelijken met een referentie.

• ROUGE-N meet de overeenkomsten van n-grammen (reeksen van n woorden) tussen de gegenereerde en de referentietekst. Bijvoorbeeld, ROUGE-1 voor overeenkomsten van individuele woorden, ROUGE-2 voor woordparen.

• ROUGE-L is gebaseerd op de lengte van de langste gemeenschappelijke subsequentie (Longest Common Subsequence, LCS) tussen twee teksten. Het houdt rekening met de volgorde van woorden, maar vereist niet dat ze aaneengesloten zijn.

Op deze manier richt ROUGE-N zich op exacte overeenkomsten van n-grammen, terwijl ROUGE-L zich richt op meer flexibele overeenkomsten van sequenties, wat helpt bij het beoordelen van de kwaliteit van het behoud van structuur en betekenis.