Kas yra A/A testas ir kam jis skirtas?

A/A testas yra eksperimentas, kuriame dvi naudotojų grupės gauna tą pačią produkto ar sąsajos versiją. Šio testo tikslas yra patikrinti eksperimentinės sistemos teisingumą, įsitikinti, kad nėra sisteminių klaidų, šališkumų atrankoje ar problemų su metrikomis.

Kam reikalingas A/A testas?

• Patikrinti, ar A/B testavimo įrankis veikia teisingai.
• Įvertinti natūralią metrikų kintamumą be pakeitimų produkte.
• Nustatyti ir kalibruoti duomenų rinkimo ir analizės sistemą.

Jei A/A teste nustatomos reikšmingos skirtumai tarp grupių, tai signalas apie problemas eksperimentinėje infrastruktūroje.