¿Qué es un grupo de consumidores en Kafka?

El grupo de consumidores en Kafka es un conjunto de consumidores que leen datos del tema de manera conjunta. Cada partición del tema se distribuye entre los consumidores del grupo de modo que cada partición sea leída solo por un consumidor del grupo. Esto permite escalar el procesamiento de mensajes y garantizar un equilibrio de carga. Si hay varios consumidores en el grupo, procesan paralelamente diferentes particiones, y si uno de los consumidores falla, sus particiones se redistribuyen entre los restantes.

Ejemplo en Go usando la biblioteca sarama:

consumerGroup, err := sarama.NewConsumerGroup(brokers, "my-group", config)
// En el manejador se implementa la lógica de procesamiento de mensajes