Que testes estatísticos são utilizados em testes A/B?

Nos testes A/B, geralmente são utilizados os seguintes testes estatísticos para avaliar a significância das diferenças entre grupos:

• Teste t (Teste t de Student) — verifica se há uma diferença estatisticamente significativa entre as médias de dois grupos. Frequentemente usado para métricas contínuas.
• Teste Z — aplicado em amostras grandes e quando a variância é conhecida, para comparar proporções ou médias.
• Testes de proporções (por exemplo, teste do qui-quadrado) — para comparar as proporções de sucesso (conversões) entre grupos.
• Teste de Mann-Whitney U — teste não paramétrico para comparar duas amostras independentes, se os dados não forem normais.

A escolha do teste depende do tipo de dados (numéricos, categóricos), distribuição e tamanho da amostra. É também importante considerar a correção para múltiplas comparações se várias métricas forem testadas.