Разкажи за най-интересния си проект в областта на NLP и LLM, включително архитектурата и оценката на решението.

В един от моите проекти в областта на NLP и LLM работих върху система за автоматичен анализ и генериране на текстове за поддръжка на клиенти. Архитектурата включваше няколко компонента:

• Предварителна обработка на данни: почистване и нормализиране на текстове.
• Модел базиран на трансформатори (например, архитектура подобна на GPT) за генериране на отговори.
• Модул за оценка на качеството на отговорите с помощта на метрики perplexity и BLEU.

За обучение на модела бяха използвани големи корпуси от диалози и специализирани набори от данни. В резултат успяхме да подобрим точността на отговорите и да съкратим времето за обработка на клиентските заявки. Оценката на решението беше извършена както количествено (метрики за качество), така и качествено (обратна връзка от потребителите).