Kas yra HyDE (Hypothetical Document Embeddings)?

HyDE (Hipotetiniai dokumentų įdėjimai) yra metodas, naudojamas dideliuose kalbos modeliuose (LLM) ir Retrieval-Augmented Generation (RAG). Idėja yra pirmiausia sugeneruoti hipotetinį dokumentą arba atsakymą į užklausą naudojant LLM, o tada gauti šio sugeneruoto teksto įdėjimą (embedding) paieškai arba suderinimui su tikrais dokumentais.

Taip, vietoj tiesioginio paieškos pagal pradinę užklausą, sistema pirmiausia sukuria "įsivaizduojamą" dokumentą, kuris atspindi užklausos prasmę, ir pagal jį vykdo paiešką. Tai padeda pagerinti paieškos kokybę ir aktualumą, ypač kai užklausos yra sudėtingos arba dviprasmiškos.

Pavyzdys taikymo:

• Vartotojas įveda klausimą.
• LLM sugeneruoja hipotetinį atsakymą arba dokumentą apie šį klausimą.
• Gautas tekstas paverčiamas į vektorių (įdėjimą).
• Paieška dokumentų bazėje vyksta remiantis įdėjimų artumu.

Tai didina Retrieval-Augmented Generation efektyvumą ir leidžia geriau susieti užklausas su aktualia informacija.