Wat is een A/A-test en waar is het voor?

Een A/A-test is een experiment waarbij twee gebruikersgroepen dezelfde variant van het product of de interface ontvangen. Het doel van deze test is om de correctheid van het experimentatiesysteem te controleren, te zorgen dat er geen systematische fouten, vertekeningen in de steekproef of problemen met de metrics zijn.

Waarom is een A/A-test nodig?

• Controleren of het A/B-testinstrument correct werkt.
• De natuurlijke variabiliteit van metrics zonder wijzigingen in het product beoordelen.
• Het verzamelen en analyseren van gegevens instellen en kalibreren.

Als bij een A/A-test significante verschillen tussen de groepen worden gevonden, is dat een teken van problemen in de experimentele infrastructuur.