[태그:] 컨슈머 그룹

  • Kafka 컨슈머 그룹과 파티션 전략 – 처리량을 2배 높이는 설계법

    Kafka 컨슈머 그룹과 파티션 전략을 잘못 설계하면, 아무리 강력한 서버를 써도 Kafka의 진짜 성능을 절반도 끌어내지 못합니다. “메시지가 쌓이는데 소비가 따라가지 못한다”, “컨슈머를 늘렸는데 처리량이 그대로다”라는 상황이 바로 파티션 설계 실패의 전형적인 증상입니다. Kafka의 병렬 처리 핵심 단위는 파티션이며, 파티션과 컨슈머 그룹의 관계를 정확히 이해하고 설계해야 비로소 처리량을 선형적으로 끌어올릴 수 있습니다. 이 글에서는 기초…