როგორ განსაზღვრავთ შეცდომის ტესტი სწორია თუ არა?

ხარვეზის განსაზღვრის ტესტის (bug fix test) სიზუსტე დამოკიდებულია შემდეგ ასპექტებზე:

1. გადამოწმების შესაძლებლობა: ტესტი უნდა შეძლოს საიმედოდ გამეორებული იყოს თავდაპირველი ხარვეზი პროდუქტის განახლებამდე.
2. მოსაზღვრე: ტესტი უნდა მოიცავდეს კონკრეტულ პირობებს და სცენარებს, სადაც ხარვეზი გამოვლინდა.
3. საკუთარი დამოუკიდებლობა: ტესტი არ უნდა იყოს დამოკიდებული გარეგან ფაქტორებზე ან სისტემის მდგომარეობაზე, რომლებიც პირდაპირ არ უკავშირდება ხარვეზს.
4. ატომარობა: ტესტი უნდა შემოწმდეს მხოლოდ კონკრეტული აღმოჩენილი ხარვეზის გამოსწორება.
5. სუფთა მოსალოდნელი შედეგი: მოსალოდნელი შედეგი უნდა იყოს ერთმნიშვნელოვანი და ასახავდეს ხარვეზის წარმატებულ გამოსწორებას.
6. სტაბილურობა: ტესტი უნდა აჩვენოს თანმიმდევრული შედეგები მრავალჯერ შესრულებისას ერთსა და იმავე ვერსიაზე.
7. მეორადი დაბრუნება: ტესტი უნდა შეძლოს სისტემის საწყის მდგომარეობაში სუფთა დაბრუნება შესრულების შემდეგ.
8. დოკუმენტაცია: ტესტი უნდა იყოს ნათლად დოკუმენტირებული, მათ შორის გამეორების ნაბიჯები, გარემო და მოსალოდნელი შედეგი.

სწორი ხარვეზის ტესტი უნდა გაიაროს განახლებული ვერსიით და ჩავარდეს ხარვეზის ვერსიით (თუ ეს შესაძლებელია მოდელირებადი იყოს ტესტის გარემოში).