Sobes.tech
Middle — Senior

Модели дугоҳаво барои retrieval чист?

sobes.tech AI

Ҷавоб аз AI

Модели бо ду кӯл барои retrieval як сохтори шабакаи нейронӣ мебошад, ки аз ду шохи алоҳида ("кулҳо") иборат аст, ки ҳар яке намудҳои гуногуни маълумотро коркард мекунад, масалан, дархостҳо ва ҳуҷҷатҳо. Ҳар як кул дархостро ба намояндагии векторӣ (embedding) дар як фазои муштарак код мекунад. Пас, барои ёфтани ҳуҷҷатҳои дахлдор, сходият (масалан, косинус) байни embedding-и дархост ва embedding-и ҳуҷҷатҳоро ҳисоб мекунанд.

Ин усул имкон медиҳад, ки индексгузорӣ ва ҷустуҷӯ дар миқдори зиёди ҳуҷҷатҳо самаранок анҷом дода шавад, зеро embedding-ҳои ҳуҷҷатҳоро метавон пешакӣ ҳисоб ва нигоҳ дошт, ва дар вақти дархост, танҳо embedding-и дархостро ҳисоб карда, ба зудӣ векторҳои наздиктаринро пайдо кард.

Масалан:

  • Кул 1: матни дархостро ба вектор код мекунад.
  • Кул 2: ҳар як ҳуҷҷатро ба вектор код мекунад.
  • Ҷустуҷӯ: ҳисоб кардани сходияти косинусӣ байни вектори дархост ва векторҳои ҳуҷҷатҳо.

Ин усул дар системҳои тавсия ва муҳаррикҳои ҷустуҷӯ барои retrieval-и масштабшаванда васеъ истифода мешавад.