Šta je HyDE (Hypothetical Document Embeddings)?

HyDE (Hipotetičke Ugrađene Dokumente) je metoda koja se koristi u sistemima sa velikim jezičkim modelima (LLM) i Generisanjem sa Povećanim Pretraživanjem (RAG). Ideja je da se prvo generiše hipotetički dokument ili odgovor na zahtev pomoću LLM, a zatim da se dobije ugrađivanje (embedding) tog generisanog teksta za pretraživanje ili usklađivanje sa stvarnim dokumentima.

Na ovaj način, umesto da se direktno traži po originalnom zahtevu, sistem prvo kreira "imaginarnu" dokument koji odražava smisao zahteva, i na osnovu toga vrši pretraživanje. Ovo pomaže u poboljšanju kvaliteta i relevantnosti pretraživanja, posebno kada su zahtevi složeni ili dvosmisleni.

Primer primene:

• Korisnik unosi pitanje.
• LLM generiše hipotetički odgovor ili dokument o tom pitanju.
• Dobijeni tekst se pretvara u vektor (ugrađivanje).
• Pretraživanje u bazi dokumenata se vrši na osnovu blizine ugrađivanja.

Ovo povećava efikasnost Generisanja sa Povećanim Pretraživanjem, omogućavajući bolje povezivanje zahteva sa relevantnim informacijama.