Sobes.tech
Junior

Architektūros užduotis: yra vartotojų ir pranešimų paslaugos. Vartotojo registracijos metu būtina garantuoti žinutės siuntimą į Kafka (norint siųsti el. laiškus). Kaip užtikrinti pristatymo garantiją, jei Kafka nėra pasiekiama?

sobes.tech AI

Atsakymas iš AI

Чтобы гарантировать доставку сообщения в Kafka при регистрации пользователя, даже если Kafka временно недоступна, можно использовать паттерн Outbox:

  1. При регистрации пользователя в сервисе Users сохранять данные пользователя и сообщение для Kafka в одной транзакции базы данных (например, в таблице outbox).
  2. Отдельный процесс или воркер периодически читает из таблицы outbox неподтверждённые сообщения и пытается отправить их в Kafka.
  3. После успешной отправки сообщение помечается как отправленное.

Таким образом, даже если Kafka недоступна в момент регистрации, сообщение не потеряется и будет отправлено позже.

Пример упрощённой схемы:

// В транзакции
saveUser(user);
saveOutboxMessage(userId, "UserRegistered");

// Отдельный процесс
List<Message> messages = readUnsentOutboxMessages();
for (Message msg : messages) {
    try {
        kafkaProducer.send(msg);
        markMessageAsSent(msg);
    } catch (Exception e) {
        // логируем и повторим позже
    }
}

Это обеспечивает надёжность и согласованность между сервисом и Kafka.