Чем Kafka отличается от RabbitMQ?

Kafka и RabbitMQ — это системы обмена сообщениями, но они имеют разные архитектурные подходы и предназначены для разных сценариев.

Kafka:

• Основана на концепции распределённого журнала (логов). Сообщения записываются в топики и хранятся на диске с возможностью повторного чтения.
• Высокая пропускная способность и масштабируемость.
• Поддерживает модель публикации-подписки с возможностью обработки больших потоков данных (stream processing).
• Клиенты сами управляют смещением (offset), что позволяет повторно читать сообщения.
• Идеальна для аналитики, обработки событий в реальном времени, больших данных.

RabbitMQ:

• Брокер сообщений с поддержкой различных протоколов (AMQP, MQTT и др.).
• Сообщения доставляются в очереди, которые гарантируют доставку и порядок.
• Поддерживает сложные маршрутизации, подтверждения доставки, TTL сообщений.
• Подходит для классической очереди задач, распределения нагрузки, RPC.

Ключевые отличия:

• Kafka ориентирована на хранение и обработку потоков данных с высокой производительностью.
• RabbitMQ — более традиционный брокер с богатой маршрутизацией и гарантией доставки.

Пример использования Kafka — сбор логов и событий для аналитики. Пример RabbitMQ — распределение задач между воркерами в микросервисах.