Подскажите, как можно ещё (если во всех логах пусто) продиагностировать

Question

Подскажите, как можно ещё (если во всех логах пусто) продиагностировать

причины по которым сервер (22.8.5) не отвечает на запросы? ни через клиент, ни через http интерфейс.
Симптомы уже описывал: через 7 дней аптайма 2 реплики перестали обрабатывать запросы, причем если попытаться авторизоваться с неправильными кредами, то сервер отвечает как обычно:
Code: 516. DB::Exception: Received from d1s4:30401. DB::Exception: login: Authentication failed: password is incorrect or there is no user with such name. (AUTHENTICATION_FAILED)
но при попытке зайти клиентом или выполнить запрос просто ничего не происходит.
p.s. кластер в кубере, кроме кх на машинах ничего нет

#backend #clickhouse #database #devops #programming #russian

0

06.10.2022

7 ответов

12 просмотров

Konstantin Sevastianov Автор вопроса

вот такую штуку нашёл в asynchronous_metric_log, HTTPThreads начинает расти по непонятной причине

0

06.10.2022

Konstantin Sevastianov Автор вопроса

Denny [Altinity]
kill query используете ? https://github.com/Click...

руками нет, если только при работе Tableau что то такое может драйвер посылать, но сейчас зависло во время наименьшей нагрузки по запросам на сервер, нашел что TCPThreads тоже улетают в космос

0

06.10.2022

Konstantin Sevastianov Автор вопроса

Denny [Altinity]
kill query используете ? https://github.com/Click...

про chproxy кстати не заметил, да используется

0

06.10.2022

Denny [Altinity]

Konstantin Sevastianov
про chproxy кстати не заметил, да используется

этот фикс есть в 22.8.6.71

0

06.10.2022