카프카에서 중복 컨슘이 발생하거나 컨슘 데이터 손실이 발생하는 경우가 있다.이 경우 중에서 원인 되는 가장 큰 이유가 리밸런스가 발생할 경우 일어 날 수 있다.리밸런스란 언제 발생하고 그러면 중복/누락 컨슘을 방지하려면 어떻게 해야 하는지에 대해 알아 본다. Apache Kafka에서 rebalance(리밸런스)는 컨슈머 그룹이 파티션을 재할당하는 과정입니다.이는 Kafka가 데이터를 효율적으로 처리하기 위해 자동으로 수행하는 작업으로, 다음과 같은 상황에서 발생합니다.1. 리밸런스가 발생하는 이유리밸런스는 다음과 같은 이유로 트리거됩니다:컨슈머 추가새로운 컨슈머가 컨슈머 그룹에 추가되면, 기존 컨슈머가 처리하던 파티션 중 일부를 새로운 컨슈머로 재할당합니다.컨슈머 제거컨슈머 그룹에서 컨슈머가 중단되거나..