Əsasən, aşağı təlim və çox təlim arasında hansı kompromiss mövcuddur?

Nəzarət altında olan (underfitting) və çox öyrənən (overfitting) arasında kompromis, çox sadə və çox mürəkkəb model arasında balansdır.

• Nəzarət altında olan (underfitting), model çox sadə olduqda və məlumatlardakı nümunələri ələ ala bilmədikdə baş verir. Nəticədə, həm təlim məlumatlarında, həm də yeni məlumatlarda pis işləyir.

• Çox öyrənən (overfitting), model çox mürəkkəb olduqda və təlim məlumatlarının səs-küyünü və təsadüfi xüsusiyyətlərini yadda saxladıqda baş verir, bu da onun yeni məlumatlara ümumiləşdirmə qabiliyyətini azaldır.

Bu kompromis, vacib asılılıqları ələ ala biləcək qədər mürəkkəb, lakin səs-küyü yadda saxlamayacaq qədər sadə model və parametrlərin seçilməsi ilə əldə edilir. Bunun üçün tənzimləmə, kross-validasiya və hiperparametrlərin tənzimlənməsi üsulları istifadə olunur.

Nümunə: çox sadə regresiya modeli (məsələn, mürəkkəb asılılıq üçün xətti) aşağı öyrənmiş olacaq, çox mürəkkəb (məsələn, yüksək dərəcəli polinom) isə çox öyrənmiş olacaq.