Маънӣ статистикӣ чист?

Статистик аҳамият (statistical significance) — бу эксперимент натижаларининг (масалан, A/B тест) тасодифий ўзгаришлардан қанчалик фарқли бўлишини ва ишончли деб ҳисобланишини ўлчовчи мезондир.

Агар натижа статистик жиҳатдан аҳамиятли бўлса, бу, бундай маълумотларни тасодифан олиш эҳтимоли жуда кичик (одатда 5% дан кам). Бу ўзгариш ҳақиқатан ҳам метрикага таъсир қилаётганлигини ёки фақат тасодифий шовқин эканлигини қарор қилишга ёрдам беради.

Масалан, агар A/B тестда B гуруҳдаги конверсия юқори бўлса ва p-ҳисоб 0.05 дан кичик бўлса, бу яхшиланиш тасодифий эмаслигини аниқ айтиш мумкин.