Jak tworzone są grupy w testach A/B?

Grupy w testach A/B są tworzone za pomocą losowego lub pseudolosowego rozkładu użytkowników lub obiektów testowych na dwie lub więcej podgrup, zwykle grupę kontrolną (A) i eksperymentalną (B). Ważne jest, aby rozkład był losowy i reprezentatywny, aby uniknąć systematycznych odchyleń.

Często stosuje się haszowanie unikalnego identyfikatora użytkownika (np. userID) z późniejszym obliczeniem reszty z dzielenia przez liczbę grup, co zapewnia stabilność i powtarzalność rozkładu. Stosuje się również rozkład stratyfikowany, jeśli konieczne jest zrównoważenie grup według ważnych cech (np. wiek, region).

Przykład prostego rozkładu:

import hashlib

def assign_group(user_id, num_groups=2):
    hash_digest = hashlib.md5(user_id.encode()).hexdigest()
    hash_int = int(hash_digest, 16)
    return hash_int % num_groups

# user_id 'user123' trafi do grupy 0 lub 1

W ten sposób grupy są tworzone tak, aby zapewnić istotność statystyczną i zminimalizować wpływ czynników zewnętrznych.