Sobes.tech
Назад к вопросам
Senior
7

Как заставить все экземпляры читать одни и те же сообщения?

Компании, где спрашивали
Позитив Технолоджис

Ответ от нейросети

sobes.tech AI

Чтобы все экземпляры приложения читали одни и те же сообщения, обычно используют централизованную систему обмена сообщениями или брокер сообщений, например, Apache Kafka, RabbitMQ или JMS. В таком случае все экземпляры подписываются на одну и ту же очередь или топик, и получают одинаковые сообщения.

Если речь о Kafka, то для того, чтобы все экземпляры читали одни и те же сообщения, можно настроить их в одну группу потребителей (consumer group), но тогда сообщения будут распределяться между ними (каждое сообщение прочитает только один экземпляр). Чтобы все экземпляры читали все сообщения, нужно, чтобы у каждого был свой уникальный consumer group id, тогда каждый экземпляр будет получать все сообщения из топика.

Пример на Java с Kafka Consumer, где каждый экземпляр читает все сообщения:

Properties props = new Properties();
props.put("bootstrap.servers", "localhost:9092");
props.put("group.id", UUID.randomUUID().toString()); // уникальный group id для каждого экземпляра
props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");

KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props);
consumer.subscribe(Collections.singletonList("my-topic"));

while (true) {
    ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
    for (ConsumerRecord<String, String> record : records) {
        System.out.printf("offset = %d, key = %s, value = %s%n", record.offset(), record.key(), record.value());
    }
}

Таким образом, каждый экземпляр будет получать все сообщения из топика.