Թեստի հզորությունը ինչ է և ինչպես ապահովել այն։

Ստատիստիկ ուժը (ստատիստիկ ուժ) — դա հավանականությունն է ճիշտ կերպով մերժել զրո հիպոթեզը, երբ փոխհատուցող հիպոթեզը ճշմարիտ է, այսինքն՝ այն ազդեցությունը հայտնաբերելու հավանականությունը, եթե այն իսկապես կա:

Որպեսզի ապահովել բարձր ուժ, անհրաժեշտ է.

• Ավելացնել նմուշի չափը — ավելի շատ տվյալներ բարելավում են գնահատման ճշգրտությունը և նվազեցնում երկրորդ տեսակի սխալի հավանականությունը (կեղծ բացասական)
• Նվազեցնել տվյալների փոփոխականությունը — օգտագործել ավելի ճշգրիտ չափումներ, վերահսկել արտաքին գործոնները
• Ընտրել համապատասխան նշանակության մակարդակ (α) — առաջին և երկրորդ տեսակի սխալների միջև հավասարակշռություն
• Օգտագործել ուժեղ վիճակագրական մեթոդներ — օրինակ, ավելի զգայուն թեստեր

A/B թեստավորման համատեքստում, սա նշանակում է պլանավորել բավարար տրաֆիկի ծավալը և փորձի տևողությունը, որպեսզի բարձր հավանականությամբ հայտնաբերել իրական տարբերությունները տարբերակների միջև։