Uzoq muddatli ta'sirlar uchun HOLD-OUT testi nima?

Uzoq muddatli ta'sirlar uchun HOLD-OUT testi, tizim yoki mahsulotda kiritilgan o'zgarishlarning barqarorligi va uzoq muddatli ta'sirini baholash usulidir; bu asosiy tajriba (masalan, A/B testi) tugagandan so'ng o'tkaziladi. An'anaviy A/B testidan farqli o'laroq, bu yerda ta'sir cheklangan vaqt davomida o'lchanadi; HOLD-OUT testi, ta'sir uzoq davom etayotganligini yoki yo'qligini kuzatishga imkon beradi.

Misol uchun: yangi funksiyaning A/B testi o'tkazilgandan so'ng, testda qatnashmagan ba'zi foydalanuvchilar (hold-out guruhi) eski versiyani ishlatishda davom etadilar. Bu guruhning xulq-atvorini bir necha hafta yoki oy davomida test guruh bilan solishtirib, o'zgarishlarning qanchalik barqaror ekanligini va ular uzoq muddatli salbiy ta'sirlar keltirib chiqaradimi-yo'qligini tushunish mumkin.