Gradient artımı nədir? Gradient harada görünür?

Gradient artımı, ansambl öyrənmə metodudur və modeli ardıcıl şəkildə qurur, yeni zəif modellər (adətən qərar ağacları) əlavə etməklə əvvəlki səhvləri düzəldir.

Hər yeni model, mövcud ansambl modelinin proqnozlarına aid itki funksiyasının gradientində öyrədilir. Sadə dillə desək, biz funksiyalar sahəsində gradient enişi istifadə edərək səhvi minimallaşdırırıq.

Hər addımda, səhv gradienti (proqnozları yaxşılaşdırmaq üçün istiqamət və ölçü) hesablanır və yeni model bu gradienti proqnoz etmək üçün öyrədilir, beləliklə yekun proqnoz tənzimlənir.

Bu, səhvi effektiv şəkildə azaltmağa və əvvəlki modellərin səhvlərinə əsaslanan ardıcıl öyrənmə ilə modelin keyfiyyətini artırmağa imkan verir.