Kā sauc testēšanas veidu, kurā bez automatizētām testēšanām nav iespējams?

Veiktspējas uzraudzība un slodzes testēšana reālos darba apstākļos / ražošanā.

Piemēri var būt:

• Veiktspējas metriku uzraudzība: Atbildes laiks, caurlaidspēja, servera resursu (CPU, RAM) izmantošana.
• Stabilitātes tests ar lielu slodzi: Liela skaita paralēlu lietotāju vai pieprasījumu simulācija, lai identificētu kļūdu punktus vai veiktspējas pasliktināšanos.
• Mērogojamības tests: Sistēmas uzvedības pārbaude, palielinot slodzi vai resursus.
• A/B testēšana ražošanā: Divu funkcionalitātes versiju salīdzināšana daļai reālo lietotāju, lai novērtētu to ietekmi uz galvenajiem rādītājiem.

Šāda veida testi prasa nepārtrauktu datu vākšanu, sintētiskas slodzes radīšanu vai reālo lietotāju uzvedības analīzi lielā mērogā, kas praktiski ir neiespējami manuāli. Šādu testu rezultāti bieži tiek izmantoti jaunu versiju izlaišanas, infrastruktūras mērogošanas vai koda optimizācijas lēmumu pieņemšanai.

Piemērs ražošanas uzraudzības rīkam:

{
  "service_name": "my-web-service",
  "metrics": {
    "request_duration_ms": {
      "average": 150,
      "p95": 300,
      "max": 1200
    },
    "error_rate_percentage": 0.5,
    "cpu_utilization_percentage": 65
  }
}