Wat gebeurt er in dit commando? (een script met zcat, awk, grep, sort, uniq voor het analyseren van Redix-logs)

Een team dat zcat, awk, grep, sort, uniq gebruikt voor het analyseren van Redis-logs voert meestal de volgende stappen uit:

1. zcat — pakt een gecomprimeerd gzip-bestand met logs uit en toont de inhoud op stdout.
2. awk — verwerkt elke regel, bijvoorbeeld door het extraheren van specifieke velden (zoals tijdstempels, IP, commando's).
3. grep — filtert de regels op basis van zoekwoorden of patronen, zodat alleen de interessante records overblijven.
4. sort — sorteert de regels, bijvoorbeeld op sleutel of tijd.
5. uniq — verwijdert duplicaten of telt het aantal herhalingen van de regels.

Kortom, deze keten maakt het mogelijk om snel statistieken of gefilterde gegevens uit grote, gecomprimeerde Redis-logs te halen zonder dat ze vooraf hoeven te worden uitgepakt of complex te worden verwerkt.

Voorbeeld:

zcat redis.log.gz | awk '{print $3}' | grep SET | sort | uniq -c | sort -nr

Dit voorbeeld toont het aantal SET-commando's, gesorteerd op aflopende frequentie.