¿Qué hacer si la prueba mostró un resultado cero?

Si la prueba A/B mostró un resultado nulo (es decir, no hay una diferencia estadísticamente significativa entre las variantes), es recomendable:

• Verificar la corrección de la realización de la prueba: la adecuación de la muestra, la duración de la prueba, las métricas.
• Evaluar si la prueba fue lo suficientemente potente (análisis de potencia) para detectar un efecto.
• Analizar la hipótesis: quizás los cambios realmente no afectan el comportamiento de los usuarios.
• Considerar realizar pruebas adicionales con otros cambios o en otros segmentos de audiencia.
• Utilizar los datos obtenidos para tomar decisiones — la ausencia de efecto también es una información importante.

Por lo tanto, un resultado nulo no es un fracaso, sino información para acciones futuras y mejoras.