Quais os mecanismos que permitem ao Kafka permanecer acessível e resistente a falhas de componentes?

O Kafka garante a disponibilidade e a resistência através de vários mecanismos-chave:

• Replicação de partições: os dados de cada partição são replicados em vários brokers, permitindo continuar a operação com outros em caso de falha de um.
• Liderança e eleição de líder: para cada partição, um líder é escolhido, que processa todas as operações de escrita e leitura, enquanto os outros são réplicas. Em caso de falha do líder, um novo líder é automaticamente eleito.
• Zookeeper (ou KRaft): coordenação e gestão do estado do cluster, monitoramento da disponibilidade de brokers e líderes.
• Compromisso de offsets: os consumidores guardam suas posições, permitindo retomar a leitura a partir da última mensagem processada.
• Idempotência e transações: evitam a duplicação de mensagens em caso de falhas.

Estes mecanismos garantem conjuntamente uma alta disponibilidade e resistência do Kafka a falhas de componentes individuais.