Co je SRM (Nesoulad poměru vzorků)?

SRM (Rozdíl poměru vzorků) — je situace v A/B testování, kdy se skutečné rozdělení uživatelů do experimentálních skupin výrazně liší od plánovaného. Například, pokud test má rozdělovat uživatele poměrem 50/50, ale nakonec jedna skupina obdrží 70 % provozu, naznačuje to SRM.

SRM signalizuje problémy s náhodností nebo technické chyby v systému rozdělování provozu, což může zkreslit výsledky experimentu.

Pro detekci SRM se obvykle používají statistické testy (například chí-kvadrát) k ověření, zda skutečné rozdělení odpovídá očekávanému. Pokud je SRM zjištěn, je třeba experiment pozastavit a analyzovat příčinu před vyvozením závěrů.