Opowiedz o swoim najciekawszym projekcie w dziedzinie NLP i LLM, w tym architekturę i ocenę rozwiązania.

W jednym z moich projektów NLP i LLM pracowałem nad systemem automatycznej analizy i generowania tekstów do obsługi klienta. Architektura obejmowała kilka komponentów:

• Wstępne przetwarzanie danych: czyszczenie i normalizacja tekstów.
• Model oparty na transformatorach (np. architektura podobna do GPT) do generowania odpowiedzi.
• Moduł oceny jakości odpowiedzi z użyciem metryk perplexity i BLEU.

Do szkolenia modelu użyto dużych korpusów dialogów i specjalistycznych zestawów danych. W rezultacie udało się poprawić dokładność odpowiedzi i skrócić czas obsługi zapytań klientów. Ocena rozwiązania była przeprowadzona zarówno ilościowo (metryki jakości), jak i jakościowo (opinie użytkowników).