Qu'est-ce qu'un buffer de replay en apprentissage continu?

Le tampon de répétition en apprentissage continu est un mécanisme de stockage et de réutilisation des données précédemment vues pour éviter l'oubli catastrophique lors de l'apprentissage sur de nouvelles données.

L'idée est que le modèle « revisite » périodiquement les anciens exemples du tampon avec les nouveaux, ce qui aide à conserver les connaissances sur les tâches précédentes. Généralement, le tampon de répétition est implémenté comme un ensemble limité d'exemples sélectionnés aléatoirement pour une ré-formation.