Sobes.tech
Junior

Arhitektonski zadatak: postoji servis Korisnici i servis Obaveštenja. Prilikom registracije korisnika, potrebno je garantovano poslati poruku u Kafka (za slanje emaila). Kako obezbediti garanciju isporuke ako Kafka nije dostupan?

sobes.tech АИ

Одговор од АИ

Чтобы гарантировать доставку сообщения в Kafka при регистрации пользователя, даже если Kafka временно недоступна, можно использовать паттерн Outbox:

  1. При регистрации пользователя в сервисе Users сохранять данные пользователя и сообщение для Kafka в одной транзакции базы данных (например, в таблице outbox).
  2. Отдельный процесс или воркер периодически читает из таблицы outbox неподтверждённые сообщения и пытается отправить их в Kafka.
  3. После успешной отправки сообщение помечается как отправленное.

Таким образом, даже если Kafka недоступна в момент регистрации, сообщение не потеряется и будет отправлено позже.

Пример упрощённой схемы:

// В транзакции
saveUser(user);
saveOutboxMessage(userId, "UserRegistered");

// Отдельный процесс
List<Message> messages = readUnsentOutboxMessages();
for (Message msg : messages) {
    try {
        kafkaProducer.send(msg);
        markMessageAsSent(msg);
    } catch (Exception e) {
        // логируем и повторим позже
    }
}

Это обеспечивает надёжность и согласованность между сервисом и Kafka.