Čo je HOLD-OUT test dlhodobých efektov?

Test HOLD-OUT dlhodobých efektov je metóda hodnotenia stability a trvalého vplyvu zmien zavedených do systému alebo produktu po ukončení hlavného experimentu (napríklad A/B testu). Na rozdiel od klasického A/B testu, kde sa efekt meria počas obmedzeného obdobia, HOLD-OUT test umožňuje sledovať, či efekt pretrváva dlhodobo.

Príklad: po vykonaní A/B testu novej funkcie niektorí používatelia, ktorí sa nezúčastnili na teste (hold-out skupina), naďalej používajú starú verziu. Porovnaním správania tejto skupiny s testovacou skupinou počas niekoľkých týždňov alebo mesiacov môžeme pochopiť, ako sú zmeny udržateľné a či spôsobujú negatívne dlhodobé dôsledky.