Ako sa nazýva typ testovania, pri ktorom je nemožné bez automatizovaného testovania?

Monitorovanie výkonu a záťažové testy v reálnych podmienkach prevádzky / produkcie.

Príklady môžu byť:

• Monitorovanie metrík výkonu: Čas odozvy, priepustnosť, využitie zdrojov (CPU, RAM) servera.
• Testovanie stability pri vysokej záťaži: Simulácia veľkého počtu paralelných používateľov alebo požiadaviek na identifikáciu bodov zlyhania alebo zníženia výkonu.
• Testovanie škálovateľnosti: Kontrola správania systému pri zvyšovaní záťaže alebo zdrojov.
• A/B testovanie v produkcii: Porovnanie dvoch verzií funkčnosti na časti skutočných používateľov na hodnotenie ich vplyvu na kľúčové metriky.

Tieto typy testov vyžadujú nepretržité zbieranie dát, generovanie syntetickej záťaže alebo analýzu správania skutočných používateľov vo veľkom meradle, čo je prakticky nemožné vykonať ručne. Výsledky takýchto testov sa často používajú na rozhodovanie o vydaní nových verzií, škálovaní infraštruktúry alebo optimalizácii kódu.

Príklad nástroja na monitorovanie v produkcii:

{
  "service_name": "my-web-service",
  "metrics": {
    "request_duration_ms": {
      "average": 150,
      "p95": 300,
      "max": 1200
    },
    "error_rate_percentage": 0.5,
    "cpu_utilization_percentage": 65
  }
}