Šta je consumer group u Kafka? Šta su particije i čemu služe?

U Kafka grupi potrošača je grupa potrošača koji zajedno čitaju podatke iz teme. Svaki potrošač u grupi dobija jedinstveni skup particija za obradu, što omogućava skaliranje čitanja i obezbeđivanje ravnoteže opterećenja.

Particije su logički odeljci teme koji omogućavaju paralelno zapisivanje i čitanje poruka. Svaka particija čuva poređani tok poruka.

Zašto su potrebne particije:

• Omogućavaju skaliranje performansi putem paralelne obrade.
• Obezbeđuju redosled poruka unutar particije.
• Omogućavaju grupi potrošača da rasporedi opterećenje između potrošača.

Primer: ako tema ima 4 particije i u grupi su 2 potrošača, svaki će dobiti po 2 particije za čitanje.