Πώς συνδέει η τιμή p τα παρατηρούμενα δεδομένα με την μηδενική υπόθεση;

p-τιμή — είναι η πιθανότητα να λάβουμε τα παρατηρούμενα δεδομένα (ή πιο ακραία), αν η μηδενική υπόθεση είναι αληθής. Με άλλα λόγια, η p-τιμή δείχνει πόσο καλά τα δεδομένα συμφωνούν με την υπόθεση ότι δεν υπάρχει επίδραση.

Αν η p-τιμή είναι πολύ μικρή (συνήθως μικρότερη από 0,05), αυτό υποδηλώνει ότι τα παρατηρούμενα δεδομένα είναι απίθανα υπό την υπόθεση ότι η μηδενική υπόθεση είναι αληθής, και μπορούμε να απορρίψουμε τη μηδενική υπόθεση υπέρ της εναλλακτικής.

Παράδειγμα: αν δοκιμάζουμε αν ένας νέος αλγόριθμος επηρεάζει την ακρίβεια του μοντέλου, η μηδενική υπόθεση είναι ότι ο αλγόριθμος δεν έχει επίδραση. Ένα μικρό p-τιμή θα δείξει ότι τα δεδομένα είναι απίθανα χωρίς επίδραση, και συνεπώς ο αλγόριθμος έχει πραγματικά επίδραση.

Έτσι, η p-τιμή συνδέει τα παρατηρούμενα δεδομένα με τη μηδενική υπόθεση μέσω της πιθανότητας να παρατηρήσουμε τέτοια δεδομένα αν η μηδενική υπόθεση είναι αληθής.