Cos'è SRM (Disallineamento del rapporto di campionamento)?

SRM (Disallineamento del Rapporto di Campione) è una situazione nei test A/B in cui la distribuzione effettiva degli utenti nei gruppi sperimentali differisce significativamente da quella pianificata. Ad esempio, se un test dovrebbe distribuire gli utenti in modo 50/50, ma alla fine un gruppo riceve il 70% del traffico, ciò indica un SRM.

Lo SRM segnala problemi con la randomizzazione o errori tecnici nel sistema di distribuzione del traffico, che possono distorcere i risultati dell’esperimento.

Per rilevare lo SRM, si utilizzano generalmente test statistici (ad esempio, il test chi-quadrato) per verificare se la distribuzione effettiva corrisponde a quella attesa. Se viene rilevato lo SRM, l’esperimento dovrebbe essere sospeso e la causa analizzata prima di trarre conclusioni.