Mis on HyDE (Hypothetical Document Embeddings)?

HyDE (Hipothetical Document Embeddings) on meetod, mida kasutatakse suurte keelemudelite (LLM) ja Retrieval-Augmented Generation (RAG) süsteemides. Mõte on esmalt genereerida hüpoteetiline dokument või vastus päringule LLM-i abil ning seejärel saada selle genereeritud teksti sisestus (embedding) otsinguks või sobitamiseks reaalse dokumentidega.

Seega, selle asemel et otsida otse algse päringu järgi, loob süsteem esmalt "mõeldud" dokumendi, mis peegeldab päringu tähendust, ning teeb selle põhjal otsingu. See aitab parandada otsingu kvaliteeti ja asjakohasust, eriti kui päringud on keerulised või mitmetähenduslikud.

Rakenduse näide:

• Kasutaja sisestab küsimuse.
• LLM genereerib hüpoteetilise vastuse või dokumendi selle küsimuse kohta.
• Saadud tekst muudetakse vektoriks (embedding).
• Dokumentide andmebaasis tehakse otsing sisestuste läheduse põhjal.

See suurendab Retrieval-Augmented Generation tõhusust ning võimaldab paremat seost päringute ja asjakohase teabega.