Какво е HyDE (Hypothetical Document Embeddings)?

HyDE (Хипотетични вграждания на документи) е метод, използван в системи с големи езикови модели (LLM) и Генериране с добавено извличане (RAG). Идеята е първо да се генерира хипотетичен документ или отговор на заявката с помощта на LLM, а след това да се получи вграждането (embedding) на този генериран текст за търсене или съпоставяне с реални документи.

По този начин, вместо да търсим директно по първоначалната заявка, системата първо създава "вообразим" документ, който отразява смисъла на заявката, и на базата на него извършва търсене. Това помага за подобряване на качеството и релевантността на търсенето, особено когато заявките са сложни или многозначни.

Пример за приложение:

• Потребителят въвежда въпрос.
• LLM генерира хипотетичен отговор или документ по този въпрос.
• Полученият текст се преобразува във вектор (embedding).
• Търсенето в базата данни с документи се извършва въз основа на близостта на векторите.

Това увеличава ефективността на Генериране с добавено извличане и позволява по-добро свързване на заявките с релевантната информация.