Kaip formuojamos grupės A/B testuose?

A/B testų grupės formuojamos naudojant atsitiktinį arba pseudoatsitiktinį naudotojų arba testavimo objektų paskirstymą į dvi ar daugiau pogrupių — paprastai kontrolinę (A) ir eksperimentinę (B). Svarbu, kad paskirstymas būtų atsitiktinis ir reprezentatyvus, siekiant išvengti sisteminių šališkumų.

Dažnai naudojamas naudotojo unikaliojo identifikatoriaus (pvz., userID) maišos (hash) taikymas, po kurio seka likusiojo dalmens skaičiavimas, padedantis užtikrinti paskirstymo stabilumą ir pakartojamumą. Taip pat taikomas stratifikavimas, jei reikia subalansuoti grupes pagal svarbius bruožus (pvz., amžių, regioną).

Paprasto paskirstymo pavyzdys:

import hashlib

def assign_group(user_id, num_groups=2):
    hash_digest = hashlib.md5(user_id.encode()).hexdigest()
    hash_int = int(hash_digest, 16)
    return hash_int % num_groups

# user_id 'user123' bus priskirtas grupei 0 arba 1

Šiuo būdu grupės formuojamos siekiant užtikrinti statistinį reikšmingumą ir sumažinti išorinių veiksnių įtaką.