Чӣ гуна аст муносибати тирезаи лағжиш дар QA барои матнҳои дароз?

Дастури дар бораи равишҳои тирезаи ҳаракаткунанда дар QA (системҳои савол ва ҷавоб) барои матнҳои дароз як усулест барои тақсим кардани матни калон ба қисмҳои ҳамоҳанг (дарҳо), ки баъдтар модел (масалан, BERT) ба таври ҷудогона коркард мешавад.

Масъала ин аст, ки бисёри моделҳо маҳдудияти дарозии воридот доранд (масалан, 512 токен). Барои коркарди матни дароз, онро ба қисмҳо бо баъзе ҳамоҳангӣ тақсим мекунанд, то ки контекст байни дарҳоро нигоҳ доранд.

Масалан:

• Матни дарозии 1500 токен ба дарҳо бо 512 токен бо қадам, масалан, 256 токен (ҳамоҳангии 256 токен) тақсим мешавад.
• Ҳар як дар ба модел дода мешавад барои гирифтани ҷавобҳо.
• Натиҷаҳо ҷамъбаст мешаванд ё беҳтарин ҷавоб интихоб мешавад.

Ин имкон медиҳад, ки бо ҳуҷҷатҳои дароз самаранок кор кард, контекстро нигоҳ дорад ва сифати ҷавобҳоро беҳтар созад.