Čo je HyDE (Hypotetické Vloženia Dokumentov)?

HyDE (Hypotetické Vloženia Dokumentov) je metóda používaná v systémoch s veľkými jazykovými modelmi (LLM) a Generovaním rozšíreným o vyhľadávanie (RAG). Myšlienka spočíva v tom, že najskôr vygenerujeme hypotetický dokument alebo odpoveď na otázku pomocou LLM a potom získame vloženie (embedding) tohto vygenerovaného textu na účely vyhľadávania alebo porovnávania s reálnymi dokumentmi.

Týmto spôsobom systém namiesto priameho hľadania podľa pôvodnej otázky najskôr vytvorí "predstaviteľný" dokument, ktorý odráža zmysel otázky, a na základe toho vykonáva vyhľadávanie. To pomáha zlepšiť kvalitu a relevantnosť vyhľadávania, najmä keď sú otázky zložité alebo viacznačné.

Príklad použitia:

• Používateľ zadá otázku.
• LLM vygeneruje hypotetickú odpoveď alebo dokument k tejto otázke.
• Získaný text sa prevedie na vektor (vloženie).
• Vyhľadávanie v databáze dokumentov sa vykonáva na základe blízkosti vložených vektorov.

Toto zvyšuje efektívnosť Generovania rozšíreného o vyhľadávanie a umožňuje lepšie prepojenie otázok s relevantnými informáciami.