Чем отличаются партиции от реплик в Kafka?

В Kafka партиции и реплики — это разные концепции, связанные с масштабированием и отказоустойчивостью.

Партиции — это логические сегменты топика, которые позволяют распределить данные и нагрузку между несколькими брокерами. Каждая партиция — это упорядоченный, неизменяемый лог сообщений. Партиции обеспечивают параллелизм: разные потребители могут читать из разных партиций одновременно.

Реплики — это копии партиций, которые хранятся на разных брокерах для обеспечения отказоустойчивости. Одна из реплик является лидером, остальные — фолловерами. Лидер обрабатывает все операции записи и чтения, а фолловеры синхронизируют данные с лидером.

Итого:

• Партиции делят топик на части для масштабирования и параллельной обработки.
• Реплики обеспечивают резервирование и высокую доступность данных.

Пример: топик с 3 партициями и фактором репликации 2 будет иметь 3 партиции, каждая из которых хранится на 2 брокерах (1 лидер + 1 реплика).