NLP va LLM sohasidagi eng qiziqarli loyihangiz haqida, arxitekturasi va yechimni baholashni ham o'z ichiga olgan holda gapiring.

Bir NLP va LLM loyihalarimdan birida, mijozlarni qo‘llab-quvvatlash uchun matnlarni avtomatik tahlil qilish va yaratish tizimi ustida ishladim. Arxitektura bir nechta komponentlarni o‘z ichiga olgan:

• Ma'lumotlarni oldindan ishlash: matnlarni tozalash va normallashtirish.
• Javoblar yaratish uchun transformatorlarga asoslangan model (masalan, GPTga o‘xshash arxitektura).
• Javoblarning sifatini baholash uchun perplexity va BLEU metriklaridan foydalanadigan modul.

Modelni o‘qitish uchun katta dialog korpuslari va maxsus ma'lumotlar to‘plamlari ishlatildi. Natijada, javoblarning aniqligi oshirildi va mijoz so‘rovlarini ishlash vaqti qisqartirildi. YeChildning baholash jarayoni sifatida ham, miqdoriy (sifat metriklari) ham, ham sifatli (foydalanuvchilarning fikrlari) tarzda amalga oshirildi.