Mi az a mintaarány-eltérés?

Mintaszám Hiba (SRM) olyan helyzet az A/B tesztekben, amikor a teszt variánsok közötti felhasználók tényleges eloszlása jelentősen eltér a tervezettől (például 50/50).

Az SRM okai kapcsolódhatnak a kísérlet beállításában elkövetett hibákhoz, követési problémákhoz, kódhibákhoz vagy külső tényezőkhöz, amelyek befolyásolják a mintát.

Miért fontos:

• Az SRM jelzi a véletlenszerű eloszlás megsértését, ami torz és megbízhatatlan eredményekhez vezethet.
• Az SRM észlelésekor ellenőrizni kell a teszt végrehajtásának helyességét, és szükség esetén meg kell állítani az elemzést a probléma megoldásáig.