Sobes.tech
Junior

Архитектурна задача: има услуга за Потребители и услуга за Известия. При регистрация на потребител трябва гарантирано да се изпрати съобщение към Kafka (за изпращане на имейл). Как да осигурим гаранция за доставка, ако Kafka не е достъпна?

sobes.tech AI

Отговор от AI

Чтобы гарантировать доставку сообщения в Kafka при регистрации пользователя, даже если Kafka временно недоступна, можно использовать паттерн Outbox:

  1. При регистрации пользователя в сервисе Users сохранять данные пользователя и сообщение для Kafka в одной транзакции базы данных (например, в таблице outbox).
  2. Отдельный процесс или воркер периодически читает из таблицы outbox неподтверждённые сообщения и пытается отправить их в Kafka.
  3. После успешной отправки сообщение помечается как отправленное.

Таким образом, даже если Kafka недоступна в момент регистрации, сообщение не потеряется и будет отправлено позже.

Пример упрощённой схемы:

// В транзакции
saveUser(user);
saveOutboxMessage(userId, "UserRegistered");

// Отдельный процесс
List<Message> messages = readUnsentOutboxMessages();
for (Message msg : messages) {
    try {
        kafkaProducer.send(msg);
        markMessageAsSent(msg);
    } catch (Exception e) {
        // логируем и повторим позже
    }
}

Это обеспечивает надёжность и согласованность между сервисом и Kafka.