Τι είναι το replay-buffer στη διαρκή μάθηση;

Το buffer αναπαραγωγής στη διαρκή μάθηση είναι ένας μηχανισμός αποθήκευσης και επανάχρησης προηγουμένως δειγμένων για την αποτροπή της καταστροφικής λήθης κατά τη διάρκεια της εκπαίδευσης σε νέα δεδομένα.

Η ιδέα είναι ότι το μοντέλο επανεξετάζει περιοδικά τα παλιά παραδείγματα από το buffer μαζί με τα νέα, βοηθώντας στη διατήρηση των γνώσεων σχετικά με προηγούμενες εργασίες. Συνήθως, το buffer αναπαραγωγής υλοποιείται ως ένα περιορισμένο σύνολο παραδειγμάτων που επιλέγονται τυχαία για επανεκπαίδευση.