Hoe worden groepen gevormd in A/B-tests?

Groepen in A/B-tests worden gevormd door middel van een willekeurige of pseudo-willekeurige verdeling van gebruikers of testobjecten over twee of meer subgroepen, meestal een controlegroep (A) en een experimentele groep (B). Het is belangrijk dat de verdeling willekeurig en representatief is om systematische vertekeningen te voorkomen.

Vaak wordt hashing van de unieke identificatie van de gebruiker (bijvoorbeeld userID) gebruikt, gevolgd door het nemen van de rest bij deling door het aantal groepen, wat stabiliteit en reproduceerbaarheid van de verdeling garandeert. Ook wordt stratificatie toegepast als het nodig is om de groepen te balanceren op basis van belangrijke kenmerken (bijvoorbeeld leeftijd, regio).

Voorbeeld van een eenvoudige verdeling:

import hashlib

def assign_group(user_id, num_groups=2):
    hash_digest = hashlib.md5(user_id.encode()).hexdigest()
    hash_int = int(hash_digest, 16)
    return hash_int % num_groups

# user_id 'user123' wordt toegewezen aan groep 0 of 1

Op deze manier worden groepen gevormd om statistische significantie te waarbóven en de invloed van externe factoren te minimaliseren.