Como você determina se um teste de erro está correto ou incorreto?

A precisão na determinação do teste de erro (teste de correção de bug) depende dos seguintes aspetos:

1. Reprodutibilidade: O teste deve reproduzir de forma fiável o erro original na versão do produto antes da correção.
2. Cobertura: O teste deve abranger condições e cenários específicos nos quais o erro se manifestava.
3. Independência: O teste não deve depender de fatores externos ou do estado do sistema que não estejam diretamente relacionados com o erro.
4. Atomicidade: O teste deve verificar apenas a correção do erro específico detectado.
5. Resultado esperado claro: O resultado esperado do teste deve ser inequívoco e refletir a correção bem-sucedida do erro.
6. Estabilidade: O teste deve fornecer um resultado consistente ao ser executado várias vezes na mesma versão do produto.
7. Retorno ao estado original: O teste deve restaurar de forma limpa o estado original do sistema após a sua execução.
8. Documentação: O teste deve estar claramente documentado, incluindo passos de reprodução, ambiente e resultado esperado.

Um teste de erro correto deve passar na versão com a correção e falhar na versão com o erro (se isso for possível de emular num ambiente de teste).