Какова основная функция параметра Offset в Kafka?

В Apache Kafka параметр Offset обозначает позицию сообщения в разделе (partition) топика. Основная функция Offset — это уникальный идентификатор для каждого сообщения в partition, который позволяет потребителю (consumer) отслеживать, какие сообщения уже были прочитаны, а какие — нет. Таким образом, Offset помогает управлять порядком чтения сообщений и обеспечивает возможность возобновления чтения с нужной позиции после перезапуска или сбоя.

Пример: если consumer прочитал сообщения с offset 0 по 99, то следующий прочитанный будет с offset 100.