Kas ir parent-document retriever un kam tas ir nepieciešams?

Vecāku dokumentu meklētājs ir komponenta Retrieval-Augmented Generation (RAG) sistēmās un lielajos valodas modeļos (LLM), kas ir atbildīgs par vecāku dokumentu vai konteksta meklēšanu un izvilkšanu, kas saistīts ar konkrētu informācijas fragmentu.

Kam tas ir paredzēts:

• RAG modeļos vispirms tiek izvilkti relevanti dokumenti no zināšanu bāzes.
• Dažreiz ir nepieciešams ne tikai konkrēts fragments, bet arī tā "vecāku" dokuments, lai nodrošinātu pilnu kontekstu atbildes ģenerēšanai.
• Vecāku dokumentu meklētājs palīdz sasaistīt atsevišķas informācijas daļas ar to avotiem, uzlabojot atbilžu kvalitāti un precizitāti.

Piemēram, ja no raksta tiek izvilkts paragrāfs, vecāku dokumentu meklētājs atradīs visu rakstu, kuram tas pieder, lai LLM varētu ņemt vērā plašāku kontekstu, veidojot atbildi.