Kas ir ticības intervāls?

Uzticības intervāls (confidence interval) ir vērtību diapazons, kas ar noteiktu varbūtību (piemēram, 95%) satur patieso parametra vērtību kopējā populācijā. A/B testu kontekstā tas palīdz novērtēt iegūto rezultātu ticamību un to, cik ļoti tie var tikt vispārīgi attiecināti uz visu auditoriju.

Piemēram, ja mēs mēra divu variantu konversijas starpību un iegūst 95% uzticības intervālu no 1% līdz 5%, tas nozīmē, ka ar 95% varbūtību patiesais konversijas uzlabojums ir šajā diapazonā. Ja intervāls ietver 0, tad var būt, ka statistiski nozīmīgas atšķirības nav.