O que é um teste A/A e para que serve?

Um teste A/A é um experimento no qual dois grupos de utilizadores recebem a mesma variante do produto ou interface. O objetivo deste teste é verificar a correção do sistema de experimentação, assegurar que não há erros sistémicos, vieses na amostra ou problemas com as métricas.

Para que serve um teste A/A?

• Verificar se a ferramenta de testes A/B funciona corretamente.
• Avaliar a variabilidade natural das métricas sem alterações no produto.
• Configurar e calibrar o sistema de recolha e análise de dados.

Se em um teste A/A forem encontradas diferenças significativas entre os grupos, isso indica problemas na infraestrutura experimental.