Jaké mechanismy zajišťují odolnost Kafka vůči poruchám a ztrátě dat?

Kafka zajišťuje odolnost vůči chybám a ztrátě dat pomocí několika klíčových mechanismů:

1. Replikace oddílů

   • Každý oddíl tématu je replikován na více brokerech.
   • Pokud selže jeden broker, data jsou dostupná na jiných replikách.

2. Potvrzení zápisu (acks)

   • Výrobce může nastavit úroveň potvrzení: od zápisu na jeden broker po potvrzení všemi replikami.
   • To umožňuje vyvážení mezi výkonem a spolehlivostí.

3. Konzistence vůdce oddílu

   • Pro každý oddíl je zvolen vůdce, který zpracovává všechny operace zápisu a čtení.
   • Repliky se synchronizují s vůdcem.

4. Nezměnitelný záznamník zpráv (log)

   • Zprávy jsou zapisovány do logových souborů, což umožňuje obnovení po selhání.

5. Kontrola posunů (offsetů)

   • Spotřebitelé si mohou ukládat své posuny, což umožňuje pokračovat ve čtení od požadovaného místa.

6. Konfigurace parametrů retence a čištění

   • Umožňuje spravovat dobu uchovávání zpráv a politiky odstraňování.

Tyto mechanismy společně zajišťují vysokou spolehlivost a odolnost Kafka vůči chybám, minimalizují riziko ztráty dat.