Wat is de waarde van de ROC-AUC-metriek voor een classifier die altijd een waarde van 0,9 geeft op een dataset bestaande uit 90 positieve en 10 negatieve voorbeelden?

ROC-AUC meet het vermogen van een classifier om klassen te onderscheiden, door de kwaliteit van de rangschikking van objecten op basis van de waarschijnlijkheid dat ze tot de positieve klasse behoren te evalueren. Als een classifier altijd dezelfde waarde (0,9) geeft, kan hij objecten niet rangschikken, en zal de ROC-AUC gelijk zijn aan 0,5 — de waarde van willekeurig gokken.

Voorbeeld:

• Alle objecten krijgen dezelfde score 0,9
• Positieve en negatieve objecten worden niet onderscheiden in de voorspelling
• De ROC-curve zal een diagonale lijn zijn, en het gebied eronder zal 0,5 zijn