Ako p-hodnota spája pozorované údaje s nulovou hypotézou?

p-hodnota — je pravdepodobnosť, že získame pozorované údaje (alebo extrémnejšie), ak je nulová hypotéza pravdivá. Inými slovami, p-hodnota ukazuje, do akej miery údaje zodpovedajú predpokladu, že efekt chýba.

Ak je p-hodnota veľmi malá (zvyčajne menej ako 0,05), naznačuje to, že pozorované údaje sú pri platnosti nulovej hypotézy nepravdepodobné, a môžeme zamietnuť nulovú hypotézu v prospech alternatívy.

Príklad: ak testujeme, či nový algoritmus ovplyvňuje presnosť modelu, nulová hypotéza je, že algoritmus nemá vplyv. Malá p-hodnota naznačí, že údaje sú nepravdepodobné bez efektu, čo znamená, že algoritmus skutočne má vplyv.

Týmto spôsobom p-hodnota spája pozorované údaje s nulovou hypotézou prostredníctvom pravdepodobnosti, že takéto údaje budú pozorované, ak je nulová hypotéza pravdivá.