Kā iestatījāt uzraudzību jaunajam pakalpojumam? Kā glabāt paneles?

Lai konfigurētu jauna pakalpojuma uzraudzību, parasti sākšu ar galveno metriku noteikšanu, kas atspoguļo pakalpojuma veselību un veiktspēju: reakcijas laiku, kļūdu skaitu, CPU un atmiņas slodzi, diska izmantošanu, kā arī biznesa metriku, ja tā ir.

Tad es konfigurēju šo metriku vākšanu, izmantojot tādus rīkus kā Prometheus, integrējot eksportētājus vai iebūvētās metrikas no pakalpojuma. Logiem es izmantoju centralizētas sistēmas, piemēram, ELK vai Loki.

Pēc metriku vākšanas es izveidoju panelus Grafanā, grupējot rādītājus pēc jēgas: kopējais skats, kļūdas, veiktspēja. Ir svarīgi, lai paneļi būtu saprotami un informatīvi dažādām komandām.

Es glabāju paneļus versiju kontroles sistēmā (Git), izmantojot Grafanas JSON konfigurāciju eksportēšanas/importēšanas iespēju. Tas ļauj sekot izmaiņām, veikt pārskatīšanu un ātri atjaunot paneļus, ja nepieciešams.