Test göstəriciləri pisləşdirsə nə etmək lazımdır?

Əgər A/B testinin nəticələrində metrikalar pisləşibsə, panikaya düşməmək və diqqətli bir analiz aparmaq vacibdir:

• Məlumatların düzgünlüyünü və nəticələrin statistik əhəmiyyətini yoxlayın.
• Hansı metrikaların dəqiq pisləşdiyini və niyə — bəlkə də dəyişiklik istifadəçi təcrübəsinə və ya texniki stabilliyə təsir edib.
• Nəticələrə təsir edə biləcək xarici amilləri qiymətləndirin (mövsümi, marketinq kampaniyaları və s.).
• Əgər ehtiyac varsa, dəyişiklikləri geri alın ki, məhsul istifadəçilər üçün pisləşməsin.
• Dərs çıxarın: nə işləməyib və bu bilikləri gələcək təcrübələr üçün istifadə edin.

Beləliklə, metrikaların pisləşməsi analiz və təkmilləşdirmə üçün siqnaldır, sadəcə ideyadan imtina etmək üçün səbəb deyil.