ROC-AUC hesaplaması için eşik değerleri nasıl belirlenir?

ROC-AUC hesaplaması için eşik değerleri, modelin bir nesneyi hangi sınıfa atayacağına karar verdiği olasılık veya model değerlendirme eşik değerleridir.

ROC eğrisinin oluşturulması için eşik değerleri, tahmin edilen olasılıkların olası değerleri aralığından seçilir (genellikle 0 ile 1 arasında). Her eşik değerde, True Positive Rate (TPR) ve False Positive Rate (FPR) değerleri hesaplanır.

Genellikle, eşik değerleri, test kümesinde tahmin edilen olasılıkların benzersiz değerleri olarak oluşturulur ve azalan sırayla sıralanır. Bu, farklı duyarlılık ve özgüllük seviyelerinde sınıflandırma kalitesini değerlendirmeye olanak tanır.

Yaklaşık algoritma:

1. Tüm nesneler için tahmin edilen olasılıkları alın.
2. Tahmin edilen olasılıkların benzersiz değerlerini sıralayın.
3. Her değeri eşik olarak kullanın, eşik üzerinde olasılığı olan nesneleri pozitif olarak sınıflandırın.
4. Her eşik için TPR ve FPR hesaplayın.

Bu noktalar temel alınarak ROC eğrisi çizilir ve altındaki alan (AUC), modelin kalitesini ölçen bir metrik olarak kullanılır.