Güven aralığı nedir?

Güven aralığı (confidence interval), belirli bir olasılıkla (örneğin, %95) genel popülasyondaki gerçek parametre değerini içeren bir değer aralığıdır. A/B testleri bağlamında, elde edilen sonuçların ne kadar güvenilir olduğunu ve bunların tüm kitleye ne kadar genellenebileceğini değerlendirmeye yardımcı olur.

Örneğin, iki varyant arasındaki dönüşüm farkını ölçüp %95 güven aralığı 1% ile 5% arasında elde edersek, bu, gerçek dönüşüm artışının bu aralıkta olduğu anlamına gelir. Eğer aralık 0’ı içeriyorsa, istatistiksel olarak anlamlı bir fark olmayabilir.