Middle — Senior
Co je to replay-buffer v kontinuálním učení?
sobes.tech AI
Odpověď od AI
Replay-buffer v kontinuálním učení je mechanismus ukládání a opětovného využití dříve viděných dat, který pomáhá předcházet katastrofickému zapomínání při tréninku na nová data.
Myšlenka je, že model periodicky "přezkoumá" staré příklady z bufferu spolu s novými, což pomáhá zachovat znalosti o předchozích úlohách. Obvykle je replay-buffer implementován jako omezená sada příkladů, které jsou náhodně vybírány pro opětovné trénování.