Sürekli öğrenmede replay-buffer nedir?

Sürekli öğrenmede replay-buffer, yeni veriler üzerinde eğitim sırasında yaşanan unutmayı (felaketli unutma) önlemek için daha önce görülen verilerin saklanması ve yeniden kullanılması mekanizmasıdır.

Fikir, modelin periyodik olarak buffer'daki eski örnekleri yeni örneklerle birlikte "gözden geçirmesi"dır; bu, önceki görevler hakkında bilgiyi korumaya yardımcı olur. Genellikle replay-buffer, rastgele seçilen sınırlı sayıda örnekten oluşan bir küme olarak uygulanır ve bu örnekler tekrar eğitim için seçilir.