O que é um buffer de replay em aprendizagem contínua?

O buffer de repetição no aprendizado contínuo é um mecanismo de armazenamento e reutilização de dados previamente vistos para evitar o esquecimento catastrófico durante o treinamento com novos dados.

A ideia é que o modelo revise periodicamente exemplos antigos do buffer juntamente com os novos, o que ajuda a manter o conhecimento sobre tarefas anteriores. Normalmente, o buffer de repetição é implementado como um conjunto limitado de exemplos que são selecionados aleatoriamente para re-treinamento.