Kas yra SRM (Imties santykio neatitikimas)?

SRM (Imties santykio neatitikimas) — tai situacija A/B testavime, kai faktinis naudotojų paskirstymas eksperimentinėse grupėse žymiai skiriasi nuo planuoto. Pavyzdžiui, jei testas turėtų paskirstyti naudotojus 50/50, tačiau galutinis rezultatas rodo, kad viena grupė gauna 70% srauto, tai rodo SRM.

SRM signalizuoja apie problemas su atsitiktinumu arba technines klaidas srauto paskirstymo sistemoje, kas gali iškreipti eksperimento rezultatus.

SRM aptikimui dažnai naudojami statistiniai testai (pvz., chi-kvadrato testas), siekiant patikrinti, ar faktinis paskirstymas atitinka tikėtą. Jei nustatomas SRM, eksperimentas turi būti sustabdytas ir priežastis išnagrinėtos prieš darant išvadas.