меня такая ситуация, что продюсером отправляется одно сообщение, а в консюмер приходит два одинаковых. Подскажите пожалуйста как можно решить данную проблему
консюмеров несколько или один? если несколько, то в одной ли они группе?
самое дешевое - не решать эту проблему, а сделать консьюмеры идемпотентными. Иначе уходить в транзакции - https://www.confluent.io/blog/exactly-once-semantics-are-possible-heres-how-apache-kafka-does-it/
Обсуждают сегодня