Так может он в консьюмер группе? И лочится потому что

Question

Go-go!

Andrei Yangabishev

Так может он в консьюмер группе? И лочится потому что

другая реплика пишет?

#backend #go #programming #russian

0

12.09.2021

6 ответов

6 просмотров

Ярослав Коробейников

И да, всё в консюмер группе и этот баг обнаружился как раз потому что лаг в кафке начал расти) Те партиции что читала эта реплика как бы застряли, эта реплика их не скидывала в клик и не комитила новые оффсеты по итогу) (комитила все те же оффсеты через другую горутину поэтому кафка не заподозрила проблемы я думаю)

0

12.09.2021

Zver

Ярослав Коробейников
Когда я под в кубе убиваю я вижу часть логов котор...

Поставьте лог перед b.flush()

0

12.09.2021

Ярослав Коробейников

Zver
Поставьте лог перед b.flush()

Да только проблема в том что я не могу воспроизвести этот баг) Это происходит без определённо видимых причин в каком-нибудь поде, может через сутки вылезти и вдруг остановить запись, может через трое)

0

12.09.2021

Ярослав Коробейников

Zver
Поставьте лог перед b.flush()

Ну учитывая что лог после b.flush() есть и это всё в цикле for то в каком то смысле этот лог и перед b.flush() ;)

0

12.09.2021

Zver

Ярослав Коробейников
Ну учитывая что лог после b.flush() есть и это всё...

Вы говорите, что через какое-то время перестает. Не может во flush вешаться?

0

12.09.2021

Ярослав Коробейников · Accepted Answer

Когда я под в кубе убиваю я вижу часть логов которые пытаются сделать graceful shutdown всякие логи отмены контекстов и тд Так вот даже там я понимаю что в моём коде for { select { case <-b.ctx.Done(): b.log.Info("Received done signal") b.finalFlush() return case <-timer.C: b.flush() b.log.Info("Success flush events") } } Вот этот Received done signal в логах не высвечиватся, потому что горутина в которой этот фор крутится явно заблокировалась где-то в выполнении b.flush() и не отпускает ;) Я вижу постоянно логи Success flush events Потом вдруг они встают, никаких логов. Я убиваю реплику, вижу логи других горутин что они завершают свою работу, но только не той горутина что флашит в кх записи)

170 похожих чатов

Так может он в консьюмер группе? И лочится потому что

6 ответов

Похожие вопросы