Pastāstiet mums par savu pieredzi ar žurnālu analīzi…

Logu analīze tika izmantota kļūdu novēršanai, uzraudzībai un incidentu cēloņu izpētei.

Galvenie lietošanas scenāriji:

Kļūdu meklēšana: Identificēt kļūdas, brīdinājumus un ģenerētās izņēmuma ziņojumus lietojumprogrammās, serveros vai datu bāzēs.
Veiktspējas diagnostika: Analizēt atbildes laiku, CPU slodzi, atmiņas patēriņu, izmantojot uzraudzības sistēmu vai pašu lietojumprogrammu logus.
Incidents analīze: Atjaunot notikumu hronoloģiju, balstoties uz dažādu komponentu logiem, lai noteiktu kļūmes cēloni.
Sistēmas stāvokļa uzraudzība: Konfigurēt brīdinājumus par galvenajiem notikumiem vai kļūdām logos.
Lietotāja uzvedības analīze: Sekot lietotāja darbību secībai, balstoties uz API vai tīmekļa servera pieprasījumu logiem.

Instrumenti un pieejas:

Teksta redaktori un komandrindas utilītas: Mazākiem projektiem vai vietējai analīzei izmantoja grep, awk, sed Linux/Unix sistēmās.
Centralizētas logu vākšanas sistēmas: Darbojās ar ELK stack (Elasticsearch, Logstash, Kibana), Grafana Loki. Šīs sistēmas ļauj vākt logus no dažādiem avotiem, centralizēti glabāt, indeksēt un vizualizēt.
Strukturēts logu rakstīšanas veids: Tika ieteikts lietot logu formātus, kas atvieglo parsēšanu (piemēram, JSON), un pievienot korelācijas ID, lai sasaistītu pieprasījumus starp pakalpojumiem.
Uzraudzība un brīdinājumi: Konfigurēt noteikumus uzraudzības sistēmās (Prometheus) un logu sistēmās (ELK, Grafana), lai sūtītu paziņojumus kritisku kļūdu vai pārmērīga brīdinājumu skaita gadījumā.

ELK piemērs kļūdas meklēšanai:

Identificēt incidentu (piemēram, lietotāja sūdzība).
Iet Kibana, izvēlēties atbilstošo logu indeksu.
Ievadīt atslēgvārdus vai filtrus (piemēram, lietotāja ID, pieprasījuma laiks, mikroservisa nosaukums).
Meklēt pēc lauka level: ERROR vai level: WARNING.
Analizēt stacktrace un apkārtējos logus, lai noteiktu kļūdas kontekstu un identificētu moduli vai funkciju, kas izraisīja kļūmi.

{
  "@timestamp": "2023-10-27T10:30:00.123Z",
  "level": "ERROR",
  "message": "Neizdevās savienoties ar datu bāzi",
  "service": "user-service",
  "correlation_id": "abc-123",
  "error": {
    "type": "SQLException",
    "message": "Connection refused",
    "stacktrace": "..." // Šeit būs pilns stacktrace
  },
  "user_id": "user-xyz"
}

Logu analīze ir būtiska produkta testēšanas un atbalsta procesa sastāvdaļa, ļaujot ātri identificēt un lokalizēt problēmas.

Pastāstiet mums par savu pieredzi ar žurnālu analīzi.