Ce este căutarea cu fascicul diversificat?

Diverse Beam Search este o modificare a algoritmului clasic de căutare în fascicul, utilizat pentru generarea de secvențe (de exemplu, în modelele de limbaj).

Ideea principală este de a crește diversitatea opțiunilor generate pentru a evita rezultate prea asemănătoare sau repetitive.

Cum funcționează:

• În loc să selecteze pur și simplu cele N continuări cele mai probabile, fasciculul este împărțit în mai multe grupuri (grupuri diverse).
• În fiecare grup, cei mai buni candidați sunt selectați ținând cont de o penalizare pentru similitudine cu cei deja selectați în alte grupuri.
• Acest lucru stimulează căutarea de căi diverse, nu doar cele mai probabile.

Aplicarea diverse beam search este utilă atunci când doriți să obțineți mai multe variante de calitate, dar diferite între ele, de exemplu, în sarcini de dialog, traducere sau generare creativă de text.