Какво е replay-buffer в непрекъснатото обучение?

Replay-buffer в продължителното обучение е механизъм за съхранение и повторна употреба на преди виждани данни, който помага да се предотврати катастрофалното забравяне по време на обучение върху нови данни.

Идеята е моделът периодично да "преглежда" старите примери от буфера заедно с новите, което помага да се запази знанието за предишните задачи. Обикновено, replay-buffer се реализира като ограничен набор от примери, които се избират случайно за повторно обучение.