Wie wählt man Tests für die Durchführung von Regressionstests aus?

Bei der Auswahl von Tests für die Regressionstests orientiere ich mich an den folgenden Kriterien:

• Tests, die kritische Geschäftsprozesse abdecken: Überprüfen die Hauptfunktionen, von denen die Arbeit des Systems abhängt.
• Tests, die Bereiche mit den meisten Änderungen abdecken: Konzentrieren sich auf die Teile des Systems, die durch letzte Änderungen oder Verbesserungen betroffen sind.
• Tests, die Bereiche mit hoher Fehlerhäufigkeit abdecken: Beziehen Szenarien ein, in denen zuvor Fehler entdeckt wurden.
• Tests, die neue Funktionalitäten abdecken: Überprüfen die korrekte Funktion der hinzugefügten Möglichkeiten und deren Integration in das bestehende System.
• Tests, die die Integration zwischen Modulen abdecken: Stellen sicher, dass verschiedene Systemteile richtig zusammenarbeiten.
• Tests, die die komplexesten und risikoreichsten Teile des Systems abdecken: Sind auf die instabilsten Bereiche ausgerichtet, in denen die Wahrscheinlichkeit von Problemen hoch ist.
• Automatisierte Tests: Automatisierte Tests sind die ideale Wahl für Regressionen aufgrund ihrer Geschwindigkeit und Zuverlässigkeit.

Zur effektiven Auswahl der Tests verwende ich außerdem:

• Analyse der Änderungen im Codebasis.
• Daten zur Fehlerhistorie und deren Lokalisierung.
• Priorisierung der Funktionalitäten mit Beteiligung des Produktmanagements.
• Ergebnisse früherer Regressionstests.

Abhängig vom Umfang der Änderungen und den verfügbaren Ressourcen kann ich entweder eine vollständige Reihe von Regressionstests oder eine Teilmenge (Smoke, Sanity) auswählen. Bei der Auswahl einer Teilmenge priorisiere ich Tests, die die wichtigsten und risikoreichsten Szenarien abdecken.

Beispiel für die Struktur der Ordner mit Regressionstests (für automatisierte):

# tests/
#   regression/
#     critical_paths/
#       test_login.py
#       test_create_order.py
#     new_features/
#       test_new_payment_method.py
#     bug_fixes/
#       test_fixed_issue_123.py
#     integration/
#       test_order_payment_flow.py
#     smoke/
#       test_basic_ui_elements.py
#   ... andere Testarten