Какво е разнообразно търсене на лъчи?

Diverse Beam Search е модификация на класическия алгоритъм за търсене с лъч, използван за генериране на последователности (например, в езикови модели).

Основната идея е да се увеличи разнообразието на генерираните варианти, за да се избегнат твърде подобни или повтарящи се резултати.

Как работи:

• Вместо просто да се избират топ-N най-вероятните продължения, лъчът се разделя на няколко групи (разнообразни групи).
• Във всяка група се избират най-добрите кандидати, като се взема предвид наказание за сходство с вече избраните в други групи.
• Това стимулира търсенето на разнообразни пътища, а не само на най-вероятните.

Прилагането на diverse beam search е полезно, когато трябва да се получат няколко качествени, но различни една от друга варианта, например при задачи за диалог, превод или творческо генериране на текст.