Hoe geven exporteurs de statistieken door?

Exporteurs gebruiken verschillende protocollen en formaten om metrics over te dragen naar monitoring systemen zoals Prometheus, Grafana en anderen. De belangrijkste benaderingen:

1. Prometheus-protocol:

   • De exporter opent een HTTP-server op een bepaalde poort.
   • Het monitoring systeem (bijvoorbeeld een Prometheus-server) voert periodiek "scraping" (ophalen) van metrics uit deze HTTP-server.
   • Het gegevensformaat is tekstueel, specifiek voor Prometheus, waarbij elke regel een metric met labels en waarde voorstelt.

   # HELP go_gc_duration_seconds Een samenvatting van de pauzeduur van de Go-garbage collector.
   # TYPE go_gc_duration_seconds summary
   go_gc_duration_seconds{quantile="0"} 6.14e-06
   go_gc_duration_seconds{quantile="0.25"} 1.0281e-05
   go_gc_duration_seconds{quantile="0.5"} 1.2357e-05
   

2. Protobuf via gRPC of andere RPC-frameworks:

   • Efficiënter formaat qua grootte en parsing.
   • Wordt vaak gebruikt in systemen met hoge belasting of bij het verzenden van data over netwerken met beperkte capaciteit.
   • Vereist het definiëren van de structuur van metrics in .proto-bestanden.

3. JSON via HTTP API:

   • Veelgebruikt formaat dat gemakkelijk te parseren is door veel systemen.
   • De exporter biedt een HTTP API waarmee metrics in JSON-formaat kunnen worden opgehaald.

   {
     "metrics": [
       {
         "name": "http_requests_total",
         "labels": {
           "method": "GET",
           "status": "200"
         },
         "value": 1024
       }
     ]
   }
   

4. OpenTelemetry Protocol (OTLP):

   • Gestandaardiseerd protocol voor het verzamelen van telemetrie (metrics, traces, logs).
   • Ondersteunt verzending van data via gRPC of HTTP.
   • Data-protocollen zijn gebaseerd op Protobuf.

5. Proprietary protocollen:

   • Sommige monitoring systemen of agents gebruiken hun eigen protocollen voor datatransmissie, geoptimaliseerd voor hun specifieke behoeften.

De keuze van protocol hangt af van het monitoring systeem, het type exporter, prestatie-eisen en flexibiliteit. De meest gebruikte aanpak binnen het Prometheus-ecosysteem is het scrapen van metrics in het native tekstformaat via HTTP.