Sinflar muvozanatsiz bo'lsa, ROC AUC o'rniga Precision-Recall egri chizig'idan foydalanish mumkinmi?

Ha, kuchli sinflar orasida muvozanatsizlik bo'lsa, Precision-Recall (PR) egri odatda ROC AUC dan ko'proq ma'lumot beradi.

Sababi, ROC AUC True Positive Rate va False Positive Rate o'rtasidagi nisbatni hisobga oladi, ammo muvozanatsizlikda, ko'p miqdordagi salbiy misollar baholashni buzishi mumkin, bu ROC AUC ni juda optimistik qiladi.

PR egriysi Precision (aniqlik) va Recall (qoniqish) ga qaratilgan bo'lib, bu kamdan-kam uchraydigan ijobiy sinflar bilan ishlashda model sifatini yaxshiroq aks ettiradi.

Shuning uchun, agar ijobiy sinf kamdan-kam uchraydigan bo'lsa, PR egriysi va mos keladigan metrika (masalan, O'rtacha Precision) model sifatini yanada to'g'ri baholash imkonini beradi.

Misol:

• Firibgarlikni aniqlash vazifasida (kamdan-kam firibgarlik tranzaktsiyalari), PR egriysi modelning firibgarliklarni qanchalik yaxshi aniqlashini ko'rsatadi, ko'p noto'g'ri ogohlantirishlarsiz.

Xulosa qilib aytganda:

• Muvozanatli sinflar uchun ROC AUC dan foydalaning.
• Kuchli sinf muvozanatsizligi bo'lsa, Precision-Recall egriysidan foydalaning.