Тест HOLD-OUT барои таъсирҳои дарозмуддат чист?

Тест HOLD-OUT барои таъсирҳои дарозмуддат як усулест барои арзёбии устуворӣ ва таъсири дарозмуддатии тағиротҳо, ки дар систем ё маҳсулот ворид шудаанд, пас аз анҷоми таҷрибаи асосӣ (масалан, тест A/B). Баръакс аз тести классикии A/B, ки таъсир дар давраи маҳдуд меомӯзад, тести HOLD-OUT имкон медиҳад, ки дарозмуддат таъсирро назорат кунад.

Масалан: пас аз гузаронидани тести A/B барои функсияи нав, баъзе корбароне, ки дар тест иштирок накардаанд (гурӯҳи hold-out), ба истифодаи версияи кӯҳна идома медиҳанд. Бо муқоиса кардани рафтори ин гурӯҳ бо гурӯҳи тест дар тӯли чанд ҳафта ё моҳ, метавон фаҳмид, ки то чӣ андоза тағиротҳо устувор ҳастанд ва оё онҳо таъсири манфии дарозмуддат доранд.