Wat is sequentieel testen (mSPRT, altijd geldig)?

Sequentiële tests zijn een statistische testmethode waarbij gegevens worden geanalyseerd terwijl ze binnenkomen, in plaats van na het verzamelen van de volledige hoeveelheid. Dit stelt je in staat om op elk moment beslissingen te nemen over de significantie van het effect zonder vooraf de steekproefgrootte vast te leggen.

mSPRT (gemodificeerde sequentiële waarschijnlijkheidsverhoudingstest) is een gemodificeerd criterium voor sequentiële waarschijnlijkheidsverhouding dat controleert op het niveau van type I-fout tijdens sequentiële gegevensanalyse. Het maakt het mogelijk om tests uit te voeren met de mogelijkheid om op elk moment te stoppen, terwijl de statistische geldigheid behouden blijft.

Altijd geldige p-waarden zijn p-waarden die correct blijven ongeacht het aantal tussentijdse gegevenscontroles. Ze maken meervoudige controles mogelijk zonder het risico op valse positieven te vergroten.

Het gebruik van sequentiële tests is vooral nuttig bij A/B-tests en experimenten, waar het belangrijk is om snel beslissingen te nemen en middelen te besparen, zonder te wachten op de volledige gegevensverzameling.