Sobes.tech
Middle

Mekkora lesz a ROC-AUC metrika értéke egy olyan osztályozónál, amely mindig 0,9 értéket ad egy 90 pozitív és 10 negatív példát tartalmazó adathalmazon?

sobes.tech MI

Válasz az MI-től

ROC-AUC a modell képességét méri, hogy megkülönböztesse az osztályokat, értékelve az objektumok rangsorolásának minőségét a pozitív osztályhoz tartozás valószínűsége alapján. Ha egy osztályozó mindig ugyanazt az értéket (0,9) adja, nem tudja rangsorolni az objektumokat, és így a ROC-AUC 0,5 lesz — ez a véletlenszerű találgatás értéke.

Példa:

  • Minden objektum ugyanazt az értéket kapja 0,9
  • A pozitív és negatív objektumokat nem lehet megkülönböztetni a jóslatban
  • A ROC-görbe diagonális lesz, és az alatta lévő terület 0,5 lesz