Nəzarətli incə tənzimləmə (SFT) nədir? Hansı məlumatlar lazımdır?

Nəzarət olunan incə tənzimləmə (SFT) — əvvəlcədən öyrədilmiş modeli (məsələn, böyük dil modelini) etiketli məlumatlar üzərində əlavə öyrədərək onu konkret vəzifəyə uyğunlaşdırma prosesidir. Sıfırdan öyrənmədən fərqli olaraq, SFT modelin mövcud biliklərindən istifadə edir və onları dəqiqləşdirir.

SFT üçün aydın girişlər və uyğun düzgün çıxışlar (etiketlər) olan məlumatlar lazımdır. Məsələn, təsnifat vəzifəsi üçün — kateqoriyalı mətnlər; cavabların yaradılması üçün — sual-cavab cütlükləri. Bu məlumatlar modelin konkret nümunələr üzərində arzu olunan nəticəni çıxarmağı öyrənməsinə imkan verir.

Misal: LLM-in dialoq dəstində əlavə öyrədilməsi, burada hər sual üçün düzgün cavab verilir, beləliklə, chatbotda cavabların keyfiyyətini artırmaq.