Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

Question

Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

все равно не становится понятнее.
кластер из 3х шардов с 2 репликами на каждом
Раскатываются скрипты liqubase с драйвером Клика. В урле профиля добавили socker_timeout=5m ( по умолчанию 30с , когда впервые ловили ошибку)
pзапрос висит 5 минут и валится с ошибкой
Падают запросы с code 159 Read timeout

В логах за указанное время падения ошибко и ерроров нет.
по метрикам никаких аномалий не видно.

Подскажите, куда копать. может кто сталкивался?

#backend #clickhouse #database #devops #programming #russian

0

21.11.2023

7 ответов

22 просмотра

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
вы бы запрос хотя бы показали на котором зависает,...

да, закономерности от запросов не отслеживали. всегда ловили или на операциях ALTER или на INSERT/DELETE row/table на селектах не ловили. к примеру есть таблица, очень маленькая, в которой пара десятков строк. При попытке ее удалить ловили ошибку. delete table name on cluster name. ON CLUSER все запросы.

0

21.11.2023

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
вы бы запрос хотя бы показали на котором зависает,...

если, это так, как с этим бороться? или может есть бестпрактисы, чтоб такое не ловить?

0

21.11.2023

Konstantin Ilchenko

Vitaliy Kryukov
если, это так, как с этим бороться? или может ест...

так а какой тип базы данных у вас? может у вас другая проблема мы например раньше делали клиента который сам умеет ходить по шардам и все запросы параллельно выполнять на каждом, без использования ON CLUSTER. Сейчас с Atomic движком поидее такой проблемы не должно быть Ну и такой подход позволяет сильно ускорят ETL, когда на каждом шарде можно параллельно запускать insert select без использования distributed таблиц

0

21.11.2023

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
так а какой тип базы данных у вас? может у вас дру...

если я правильно понял то восновном это MergeTree и Destributed таблицы

0

21.11.2023

Konstantin Ilchenko

Vitaliy Kryukov
если я правильно понял то восновном это MergeTree ...

тип базы данных, а не таблиц select name, engine from system.databases

0

21.11.2023

Vitaliy Kryukov Автор вопроса

Konstantin Ilchenko
тип базы данных, а не таблиц select name, engine f...

Atomic по умолчанию

0

21.11.2023

Konstantin Ilchenko · Accepted Answer

Konstantin Ilchenko

вы бы запрос хотя бы показали на котором зависает, но например у вас база не Atomic и крутится OPTIMIZE ON CLUSTER запрос, в это время вы пытаетесь делать в миграции другие ON CLUSTER операции, они будут ждать OPTIMIZE

0

21.11.2023

184 похожих чатов

Коллеги, может кто сталкивался. По всем описаниям ошибка клиентска, но чет

7 ответов

Похожие вопросы