Ce este puterea statistică?

Puterea statistică reprezintă probabilitatea de a respinge corect ipoteza nulă atunci când ipoteza alternativă este adevărată, adică probabilitatea de a detecta un efect real în date. În contextul testelor A/B, o putere statistică ridicată înseamnă că testul poate identifica diferențe semnificative între variante dacă acestea există cu adevărat. O putere scăzută crește riscul de eroare de tip II — de a nu observa o diferență existentă. Pentru a crește puterea, se poate mări dimensiunea eșantionului, reduce variabilitatea datelor sau crește efectul pe care încercăm să-l detectăm.