Как са свързани Topic и Partition в Kafka?

В Apache Kafka Topic е логическа категория или поток от съобщения, в който се публикуват данни. Всеки Topic се разделя на няколко Partition — физически части, които съхраняват съобщенията в ред.

Връзката между тях:

• Topic се състои от една или повече Partition.
• Partition е последователност от съобщения, които се съхраняват на Kafka брокери.
• Разделянето на Topic на Partition позволява мащабиране на обработката на данни и осигурява паралелизъм: различни потребители могат да четат различни Partition едновременно.
• Поредността на съобщенията е гарантирана вътре в една Partition, но не и между Partition.

Така, Partition е единица за паралелизъм и мащабируемост в Topic, а Topic е логическа група от съобщения, която обединява тези Partition.