Czym jest istotność statystyczna i jak oblicza się wartość p?

Wartość p (p-value) to prawdopodobieństwo zaobserwowania danych równych lub bardziej ekstremalnych niż te faktycznie uzyskane, zakładając, że hipoteza zerowa jest prawdziwa. Im mniejsza wartość p, tym silniejszy jest dowód przeciw hipotezie zerowej.

Aby obliczyć wartość p, zazwyczaj:

1. Formułuje się hipotezę zerową (np. brak różnicy między grupami).
2. Wybiera się statystykę testową (np. statystykę t).
3. Oblicza się wartość statystyki na podstawie danych.
4. Określa się prawdopodobieństwo uzyskania takiej lub bardziej ekstremalnej wartości statystyki z rozkładu przy hipotezie zerowej — to jest wartość p.

Jeśli wartość p jest mniejsza od wcześniej ustalonego poziomu istotności (zwykle 0.05), wynik uważa się za statystycznie istotny.