Kas yra consumer group Kafkaje? Kas yra partitionai ir kam jie reikalingi?

Kafka vartotojų grupė — tai vartotojų grupė, kurie kartu skaito duomenis iš temos. Kiekvienas grupės vartotojas gauna unikalų skyrių rinkinį apdorojimui, kas leidžia skalę skaityti ir užtikrinti apkrovos pusiausvyrą.

Skyrių dalys — tai loginiai temos padalijimai, leidžiantys paraleliai rašyti ir skaityti žinutes. Kiekvienas skyrius saugo tvarkingą žinučių srautą.

Kodėl reikalingi skyriai:

• Leidžia skalę našumui per paralelinį apdorojimą.
• Užtikrina žinučių tvarką skyriuje.
• Leidžia vartotojų grupei paskirstyti apkrovą tarp vartotojų.

Pavyzdys: jei temos turi 4 skyrius ir grupėje yra 2 vartotojai, kiekvienas gaus po 2 skyrius skaityti.