Jak nazywa się rodzaj testu, w którym nie można obejść się bez testów automatycznych?

Monitorowanie wydajności i testy obciążeniowe w warunkach rzeczywistych / produkcyjnych.

Przykładami mogą być:

• Monitorowanie metryk wydajności: Czas odpowiedzi, przepustowość, wykorzystanie zasobów (CPU, RAM) serwera.
• Testowanie stabilności przy dużym obciążeniu: Symulacja dużej liczby użytkowników lub zapytań równoległych w celu wykrycia punktów awarii lub degradacji wydajności.
• Testowanie skalowalności: Sprawdzanie zachowania systemu przy zwiększaniu obciążenia lub zasobów.
• Testy A/B w produkcji: Porównanie dwóch wersji funkcji na części rzeczywistych użytkowników w celu oceny ich wpływu na kluczowe metryki.

Te rodzaje testów wymagają ciągłego zbierania danych, generowania sztucznego obciążenia lub analizy zachowania rzeczywistych użytkowników na dużą skalę, co jest praktycznie niemożliwe do wykonania ręcznie. Wyniki takich testów często służą do podejmowania decyzji o wydaniu nowych wersji, skalowaniu infrastruktury lub optymalizacji kodu.

Przykład narzędzia do monitorowania w produkcji:

{
  "service_name": "my-web-service",
  "metrics": {
    "request_duration_ms": {
      "average": 150,
      "p95": 300,
      "max": 1200
    },
    "error_rate_percentage": 0.5,
    "cpu_utilization_percentage": 65
  }
}