Колко партиции трябва да има Kafka топик?

Броят на партициите в Kafka топик зависи от няколко фактора:

• Изисквана пропускателна способност: Колкото повече партиции, толкова по-голям паралелизъм и капацитет.
• Брой потребители в групата: Обикновено броят на партициите трябва да бъде поне равен на броя на потребителите, за да се осигури ефективно разпределение на натоварването.
• Хардуерни ресурси: По-голям брой партиции увеличава натоварването върху контролера и брокерите.

Оптималният брой партиции е компромис между производителност и сложност на управлението. Например, за малки системи са достатъчни 3-10 партиции, а за системи с висок товар — стотици или повече.

Пример за настройка на топик с 10 партиции чрез командата kafka-topics:

kafka-topics --create --topic my-topic --partitions 10 --relication-factor 3 --bootstrap-server localhost:9092