Ce este nepotrivirea raportului de eșantionare?

Diferentația Ratiosului de Eșantion (SRM) este o situație în testele A/B în care distribuția reală a utilizatorilor între variantele testului diferă semnificativ de cea planificată (de exemplu, 50/50).

Cauzele SRM pot fi legate de erori în configurarea experimentului, probleme de urmărire, erori în cod sau factori externi care influențează eșantionul.

De ce este important:

• SRM indică o încălcare a distribuției aleatorii, ceea ce poate duce la rezultate părtinitoare și nesigure ale testului.
• La detectarea SRM, trebuie verificată corectitudinea implementării testului și, eventual, întreruptă analiza până la rezolvarea problemei.

Pentru detectarea SRM, se folosesc de obicei teste statistice (de exemplu, testul chi-pătrat) pentru a verifica conformitatea distribuției reale cu cea așteptată.