Kuidas moodustatakse grupid A/B testides?

A/B testide gruppid moodustatakse juhusliku või pseudosjuhusliku kasutajate või testobjektide jaotamise teel kahe või enama alagrupi — tavaliselt kontrollrühma (A) ja katserühma (B). Oluline on, et jaotus oleks juhuslik ja esinduslik, et vältida süsteemseid kallutatusi.

Sageli kasutatakse kasutaja unikaalse identifikaatori (näiteks userID) hashimist ning seejärel jaotise jäägi arvutamist jaotuse arvuga, mis tagab jaotuse stabiilsuse ja korduvuse. Samuti rakendatakse stratifikatsiooni jaotust, kui on vaja tasakaalustada rühmi oluliste tunnuste (näiteks vanus, piirkond) järgi.

Lihtne jaotuse näide:

import hashlib

def assign_group(user_id, num_groups=2):
    hash_digest = hashlib.md5(user_id.encode()).hexdigest()
    hash_int = int(hash_digest, 16)
    return hash_int % num_groups

# kasutaja 'user123' kuulub gruppi 0 või 1

Sellisel viisil moodustatakse rühmad, et tagada statistiline olulisus ning minimeerida välistegurite mõju.