SRM (Nümunə Nisbət Uyğunsuzluğu) nədir?

SRM (Nümunə nisbətinin uyğunsuzluğu) — bu A/B testlərində istifadəçilərin eksperimental qruplara faktiki paylanması planlaşdırılmışdan əhəmiyyətli dərəcədə fərqli olduğu vəziyyətdir. Məsələn, test istifadəçiləri 50/50 bölməlidirsə, amma nəticədə bir qrup 70% trafik alırsa, bu SRM-ni göstərir.

SRM trafik paylanma sistemində təsadüfi və ya texniki səhvlərlə bağlı problemləri işarə edir və bu, təcrübənin nəticələrini pozula bilər.

SRM-ni aşkar etmək üçün adətən statistik testlər (məsələn, chi-kvadrat testi) istifadə olunur və faktiki paylanmanın gözlənilənlə uyğun olub-olmadığı yoxlanılır. Əgər SRM aşkar edilərsə, təcrübə dayandırılmalı və səbəblər araşdırılmalı, sonra nəticələr çıxarılmalıdır.