Praktická úloha
AI navrhuje trénovať LoRA na všetkých 2 miliónoch nezpracovaných dialógov. Aká je najzrelšia odpoveď kandidáta?
- Dôvera v AI: veľký korpus sám vyrovná chyby.
- Najskôr zmeniť prompt bez zmeny údajov.
- Vytrénovať LoRA na očistenom časti a porovnať ju s základným modelom.
- Pred tréningom skontrolovať náhodný vzorku označení.
- Najskôr skontrolovať údaje a kvalitu podľa tém na samostatnom sete, potom obmedzene trénovať LoRA.
- Trénovať na celom korpuse, ale znížiť rad LoRA.