Czym jest Minimalny Wykrywalny Efekt?

Minimalny wykrywalny efekt (MDE) to minimalny rozmiar efektu (zmiany metryki), który można statystycznie wykryć z pewnością w teście A/B przy zadanym poziomie istotności i mocy testu.

Mówiąc prościej, MDE pokazuje, jak bardzo metryka (np. konwersja) musi się zmienić, abyśmy mogli z pewnością stwierdzić, że zmiana nie jest przypadkowa.

Znajomość MDE pomaga:

• Określić potrzebny rozmiar próbki do testu.
• Zrozumieć, które zmiany są naprawdę istotne dla biznesu.

Na przykład, jeśli MDE wynosi 5%, oznacza to, że test może wykryć poprawę lub pogorszenie metryki o co najmniej 5% z ustalonym poziomem pewności statystycznej.