Qu'est-ce que la puissance statistique?

La puissance statistique est la probabilité de rejeter correctement l'hypothèse nulle lorsque l'hypothèse alternative est vraie, c'est-à-dire la probabilité de détecter un effet réel dans les données. Dans le contexte des tests A/B, une puissance statistique élevée signifie que le test est capable de détecter des différences significatives entre les variantes si elles existent réellement. Une faible puissance augmente le risque d'erreur de type II — ne pas détecter une différence existante. Pour augmenter la puissance, on peut augmenter la taille de l'échantillon, réduire la variabilité des données ou augmenter l'effet que l'on cherche à détecter.