Czym jest parent-document retriever i do czego służy?

Recuperator dokumentów nadrzędnych to komponent w systemach Generacji Wzbogaconej o Wyszukiwanie (RAG) i dużych modelach językowych (LLM), który odpowiada za wyszukiwanie i wyodrębnianie dokumentów nadrzędnych lub kontekstu związanego z konkretnym fragmentem informacji.

Do czego służy:

• W modelach RAG najpierw wyodrębnia się istotne dokumenty z bazy wiedzy.
• Czasami konieczne jest uzyskanie nie tylko konkretnego fragmentu, ale także jego "dokumentu nadrzędnego", aby zapewnić pełny kontekst do generowania odpowiedzi.
• Recuperator dokumentów nadrzędnych pomaga powiązać poszczególne części informacji z ich źródłami, poprawiając jakość i precyzję odpowiedzi.

Na przykład, jeśli wyodrębniono akapit z artykułu, recuperator znajdzie cały artykuł, do którego on należy, aby LLM mógł uwzględnić szerszy kontekst podczas formułowania odpowiedzi.