Какво е последователното тестване (mSPRT, винаги валидно)?

Последователното тестване е метод за статистическо тестване, при който данните се анализират по време на тяхното получаване, а не след събирането на цялото количество. Това позволява да се вземат решения за значимостта на ефекта по всяко време, без да е необходимо предварително да се фиксира размерът на извадката.

mSPRT (модифициран последователен тест за съотношение на вероятностите) е модифицирано критерий за последователно съотношение на вероятностите, който осигурява контрол на нивото на грешка от първи тип при последователния анализ на данните. Позволява провеждането на тестове с възможност за спиране по всяко време, като същевременно запазва коректността на статистическите изводи.

Винаги валидните p-стойности са тези, които остават коректни независимо от броя на междинните проверки на данните. Те позволяват извършването на множество проверки без увеличаване на риска от фалшиви положителни резултати.

Използването на последователни тестове е особено полезно при A/B тестове и експерименти, където е важно бързо да се вземат решения и да се спестят ресурси, без да се чака пълното събиране на данните.