Mis on parent-document retriever ja milleks see on vajalik?

Vanemate dokumendi otsija on komponent Retrieval-Augmented Generation (RAG) süsteemides ja suurtes keelemudelites (LLM), mis vastutab konkreetse teabefragmendi seotud vanemdokumendi või konteksti otsimise ja väljavõtmise eest.

Milleks see on:

• RAG-mudelites väljastatakse esmalt teadmistebaasist asjakohased dokumendid.
• Mõnikord on vaja saada mitte ainult konkreetset fragmendi, vaid ka selle "vanem"-dokument, et tagada täielik kontekst vastuse genereerimiseks.
• Vanemate dokumentide otsija aitab ühendada üksikud teabepartii nende allikatega, parandades vastuste kvaliteeti ja täpsust.

Näiteks, kui artiklist väljastatakse lõik, leiab vanemate dokumentide otsija kogu artikli, millele see kuulub, et LLM saaks vastuse koostamisel arvestada laiemat konteksti.