Kafka обычно используется как система передачи сообщений, а не как долговременное хранилище данных. Однако, благодаря возможности хранения сообщений с настройкой времени хранения (retention), Kafka может временно хранить данные.

В реальных проектах Kafka может содержать от нескольких тысяч до миллионов сообщений, в зависимости от конфигурации и нагрузки. Например, если речь идет о системе объявлений, то количество объявлений в Kafka зависит от времени хранения и объема входящего потока. Обычно Kafka хранит данные от нескольких часов до нескольких дней, чтобы обеспечить гарантированную доставку и возможность повторного чтения.

Пример конфигурации хранения в Kafka:

log.retention.hours=168  # хранить сообщения 7 дней
log.segment.bytes=1073741824  # размер сегмента 1 ГБ

Таким образом, Kafka может содержать большое количество объявлений, но это не заменяет полноценное хранилище, а служит буфером и системой передачи.

Использовали ли Kafka как хранилище? Сколько объявлений лежало в Kafka?