Hangi test türü, otomatik test olmadan yapılamaz?

Gerçek kullanım koşullarında / üretimde performans izleme ve yük testi.

Örnekler şunlar olabilir:

• Performans metriklerinin izlenmesi: Yanıt süresi, kapasite, sunucunun kaynak kullanımı (CPU, RAM).
• Yük altında stabilite testi: Çok sayıda paralel kullanıcı veya istek taklidi yaparak arıza noktalarını veya performans düşüşlerini tespit etme.
• Ölçeklenebilirlik testi: Sistemin yük veya kaynak arttıkça davranışını kontrol etme.
• Üretimde A/B testi: Gerçek kullanıcıların bir kısmında iki fonksiyon sürümünü karşılaştırma ve anahtar metriklere etkisini değerlendirme.

Bu test türleri, sürekli veri toplama, sentetik yük oluşturma veya gerçek kullanıcı davranışlarını büyük ölçekte analiz etmeyi gerektirir, bu da manuel olarak neredeyse imkansızdır. Bu testlerin sonuçları, yeni sürümlerin yayınlanması, altyapının ölçeklendirilmesi veya kod optimizasyonu kararlarında sıklıkla kullanılır.

Üretimde izleme için bir araç örneği:

{
  "service_name": "my-web-service",
  "metrics": {
    "request_duration_ms": {
      "average": 150,
      "p95": 300,
      "max": 1200
    },
    "error_rate_percentage": 0.5,
    "cpu_utilization_percentage": 65
  }
}