Vertel over je meest interessante project op het gebied van NLP en LLM, inclusief de architectuur en evaluatie van de oplossing.

In een van mijn projecten op het gebied van NLP en LLM heb ik gewerkt aan een systeem voor automatische analyse en generatie van teksten ter ondersteuning van klanten. De architectuur omvatte verschillende componenten:

• Gegevensvoorbewerking: het reinigen en normaliseren van teksten.
• Een transformer-gebaseerd model (bijvoorbeeld een GPT-achtige architectuur) voor het genereren van antwoorden.
• Een kwaliteitsbeoordelingsmodule voor antwoorden met behulp van perplexity- en BLEU-metrics.

Voor het trainen van het model werden grote dialogenkorpus en gespecialiseerde datasets gebruikt. Hierdoor kon de nauwkeurigheid van de antwoorden worden verbeterd en de verwerkingstijd van klantverzoeken worden verkort. De oplossing werd zowel kwantitatief (kwaliteitsmetingen) als kwalitatief (gebruikersfeedback) geëvalueerd.