Czym jest minimalny wykrywalny efekt (MDE)?

Minimalny wykrywalny efekt (MDE) to minimalny rozmiar efektu (różnica między grupą kontrolną a testową), który można statystycznie wiarygodnie wykryć w eksperymencie, na przykład w teście A/B.

MDE pomaga określić, jak duża musi być różnica w metrykach, aby wynik był uważany za istotny i nieprzypadkowy. Jest to ważny parametr przy planowaniu eksperymentu, ponieważ wpływa na rozmiar próbki i czas trwania testu.

Na przykład, jeśli MDE wynosi 5%, oznacza to, że eksperyment musi być w stanie wykryć zmianę metryki nie mniejszą niż 5%, aby wynik był uważany za statystycznie istotny.