Testi nə qədər saxlamaq lazımdır?

A/B sınaq müddəti bir neçə amildən asılıdır: trafik həcmi, lazım olan statistik əhəmiyyət və mövsümi dalğalanmalar. Adətən, test kifayət qədər məlumat toplanana qədər aparılır — bu, bir neçə gündən bir neçə həftəyə qədər çəkə bilər.

Əhəmiyyətli olanlar:

• Hər bir qrupda statistik əhəmiyyət üçün kifayət qədər istifadəçi sayı.
• Göstəricilərin stabilliyi (müvəqqəti anomaliyaların təsirini aradan qaldırmaq).
• İstifadəçi davranış dövrləri (məsələn, həftəlik və ya aylıq nümunələr).

Tez-tez statistik metodlar (məsələn, p-dəyərinin hesablanması və ya güvən intervalları) istifadə olunur, testin nə vaxt dayandırılacağı və qərar veriləcəyi vaxtı müəyyən etmək üçün.