Parlez-moi de votre projet le plus intéressant dans le domaine du NLP et des LLM, y compris l'architecture et l'évaluation de la solution.

Dans l’un de mes projets de PNL et LLM, j’ai travaillé sur un système d’analyse et de génération automatique de textes pour le support client. L’architecture comprenait plusieurs composants:

• Prétraitement des données : nettoyage et normalisation des textes.
• Modèle basé sur des transformateurs (par exemple, une architecture similaire à GPT) pour la génération de réponses.
• Module d’évaluation de la qualité des réponses utilisant des métriques de perplexité et BLEU.

Pour entraîner le modèle, de grands corpus de dialogues et des ensembles de données spécialisés ont été utilisés. En conséquence, la précision des réponses a été améliorée et le temps de traitement des demandes des clients réduit. L’évaluation de la solution a été effectuée à la fois quantitativement (métriques de qualité) et qualitativement (retour des utilisateurs).