Co je to minimální detekovatelný efekt (MDE)?

Minimální detekovatelný efekt (MDE) je minimální velikost efektu (rozdíl mezi kontrolní a testovací skupinou), kterou lze statisticky spolehlivě zjistit v experimentu, například v A/B testu.

MDE pomáhá určit, jak velký musí být rozdíl v metrikách, aby byl výsledek považován za významný a nikoliv náhodný. Je to důležitý parametr při plánování experimentu, protože ovlivňuje velikost vzorku a délku testu.

Například, pokud je MDE rovno 5 %, znamená to, že experiment musí být schopen detekovat změnu metriky alespoň o 5 %, aby byl výsledek považován za statisticky významný.