¿Qué es la discrepancia en la proporción de muestras?

La Desigualdad en la Proporción de Muestras (SRM) es una situación en las pruebas A/B donde la distribución real de usuarios entre las variantes de la prueba difiere significativamente de la planificada (por ejemplo, 50/50).

Las causas del SRM pueden estar relacionadas con errores en la configuración del experimento, problemas con el seguimiento, errores en el código o factores externos que afectan la muestra.

Por qué es importante:

• El SRM indica una violación de la distribución aleatoria, lo que puede llevar a resultados sesgados e inexactos en la prueba.
• Cuando se detecta SRM, se debe verificar la corrección en la implementación de la prueba y, posiblemente, detener el análisis hasta resolver el problema.

Para detectar el SRM, generalmente se utilizan pruebas estadísticas (por ejemplo, chi-cuadrado) para verificar la conformidad de la distribución real con la esperada.