Hoe bepaalt u of een foutentest correct of incorrect is?

De juistheid van het bepalen van een bugfix-test hangt af van de volgende aspecten:

1. Reproduceerbaarheid: De test moet betrouwbaar de oorspronkelijke fout reproduceren in de versie van het product vóór de correctie.
2. Coverage: De test moet specifieke omstandigheden en scenario's dekken waarin de fout zich manifesteerde.
3. Onafhankelijkheid: De test mag niet afhankelijk zijn van externe factoren of systeemstatussen die niet direct gerelateerd zijn aan de fout.
4. Atomair: De test moet alleen de correctie van de specifieke gedetecteerde fout controleren.
5. Duidelijk verwachte resultaat: Het verwachte resultaat van de test moet eenduidig zijn en de succesvolle correctie van de fout weerspiegelen.
6. Stabiliteit: De test moet consistente resultaten opleveren bij herhaald uitvoeren op dezelfde versie van het product.
7. Terugkeer naar de oorspronkelijke staat: De test moet de oorspronkelijke systeemstatus na uitvoering schoon herstellen.
8. Documentatie: De test moet duidelijk gedocumenteerd zijn, inclusief reproduceerstappen, omgeving en verwachte resultaat.

Een correcte bugtest moet slagen in de versie met de correctie en falen in de versie met de fout (indien dit mogelijk is te emuleren in een testomgeving).