Mi az a HyDE (Hipotetikus Dokumentum Beágyazások)?

HyDE (Hipotetikus Dokumentum Beágyazások) egy módszer, amelyet nagy nyelvi modellekkel (LLM) és Retrieval-Augmented Generation (RAG) rendszereknél használnak. Az ötlet az, hogy először generáljunk egy hipotetikus dokumentumot vagy választ a kérésre az LLM segítségével, majd ennek a generált szövegnek a beágyazását (embedding) kapjuk meg kereséshez vagy összehasonlításhoz valódi dokumentumokkal.

Így ahelyett, hogy közvetlenül a kérés alapján keresnénk, a rendszer először létrehoz egy "képzeletbeli" dokumentumot, amely tükrözi a kérés értelmét, és ennek alapján végzi a keresést. Ez segít javítani a keresés minőségét és relevanciáját, különösen akkor, ha a kérdések összetettek vagy többértelműek.

Alkalmazási példa:

• A felhasználó kérdést ír be.
• Az LLM generál egy hipotetikus választ vagy dokumentumot erről a kérdésről.
• A kapott szöveg vektorrá (beágyazás) alakul.
• A dokumentumok adatbázisában a keresés a beágyazások közelsége alapján történik.

Ez növeli a Retrieval-Augmented Generation hatékonyságát, lehetővé téve a kérdések és a releváns információk jobb összekapcsolását.