Ako sa tvoria skupiny v A/B testoch?

Skupiny v A/B testoch sa tvoria pomocou nahodného alebo pseudo-nahodného rozdelenia užívateľov alebo testovacích objektov na dve alebo viac podskupín — zvyčajne kontrolná (A) a experimentálna (B). Je dôležité, aby rozdelenie bolo náhodné a reprezentatívne, aby sa predišlo systémovým skresleniam.

Často sa používa hashovanie jedinečného identifikátora používateľa (napríklad userID) s následným výpočtom zvyšku po delení počtom skupín, čo zabezpečuje stabilitu a reprodukovateľnosť rozdelenia. Tiež sa aplikuje stratifikované rozdelenie, ak je potrebné vyvážiť skupiny podľa dôležitých znakov (napríklad vek, región).

Príklad jednoduchého rozdelenia:

import hashlib

def assign_group(user_id, num_groups=2):
    hash_digest = hashlib.md5(user_id.encode()).hexdigest()
    hash_int = int(hash_digest, 16)
    return hash_int % num_groups

# user_id 'user123' bude priradený do skupiny 0 alebo 1

Týmto spôsobom sa skupiny tvoria tak, aby zabezpečili štatistickú významnosť a minimalizovali vplyv vonkajších faktorov.