Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

Question

Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

все равно не становится понятнее.
кластер из 3х шардов с 2 репликами на каждом
Раскатываются скрипты liqubase с драйвером Клика. В урле профиля добавили socker_timeout=5m ( по умолчанию 30с , когда впервые ловили ошибку)
pзапрос висит 5 минут и валится с ошибкой
Падают запросы с code 159 Read timeout

В логах за указанное время падения ошибко и ерроров нет.
по метрикам никаких аномалий не видно.

Подскажите, куда копать. может кто сталкивался?

#backend #clickhouse #database #devops #programming #russian

0

21.11.2023

7 ответов

12 просмотров

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
вы бы запрос хотя бы показали на котором зависает,...

да, закономерности от запросов не отслеживали. всегда ловили или на операциях ALTER или на INSERT/DELETE row/table на селектах не ловили. к примеру есть таблица, очень маленькая, в которой пара десятков строк. При попытке ее удалить ловили ошибку. delete table name on cluster name. ON CLUSER все запросы.

0

6 месяцев назад

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
вы бы запрос хотя бы показали на котором зависает,...

если, это так, как с этим бороться? или может есть бестпрактисы, чтоб такое не ловить?

0

6 месяцев назад

Konstantin Ilchenko

Vitaliy Kryukov
если, это так, как с этим бороться? или может ест...

так а какой тип базы данных у вас? может у вас другая проблема мы например раньше делали клиента который сам умеет ходить по шардам и все запросы параллельно выполнять на каждом, без использования ON CLUSTER. Сейчас с Atomic движком поидее такой проблемы не должно быть Ну и такой подход позволяет сильно ускорят ETL, когда на каждом шарде можно параллельно запускать insert select без использования distributed таблиц

0

6 месяцев назад

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
так а какой тип базы данных у вас? может у вас дру...

если я правильно понял то восновном это MergeTree и Destributed таблицы

0

6 месяцев назад

Konstantin Ilchenko

Vitaliy Kryukov
если я правильно понял то восновном это MergeTree ...

тип базы данных, а не таблиц select name, engine from system.databases

0

6 месяцев назад

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
тип базы данных, а не таблиц select name, engine f...

Atomic по умолчанию

0

6 месяцев назад

Konstantin Ilchenko · Accepted Answer

Konstantin Ilchenko

вы бы запрос хотя бы показали на котором зависает, но например у вас база не Atomic и крутится OPTIMIZE ON CLUSTER запрос, в это время вы пытаетесь делать в миграции другие ON CLUSTER операции, они будут ждать OPTIMIZE

0

6 месяцев назад

184 похожих чатов

Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

7 ответов

Похожие вопросы