Подскажите, КХ может одновременно несколько DDL отрабатывать? Запустили долгий ALTER

Question

ClickHouse не тормозит

Konstantin Ilchenko

Подскажите, КХ может одновременно несколько DDL отрабатывать? Запустили долгий ALTER

TABLE MODIFY TTL ON CLUSTER и все остальные DDL даже не пытаются запуститься, просто по таймауту отваливаются

#backend #clickhouse #database #devops #programming #russian

0

30.08.2021

14 ответов

31 просмотр

Konstantin Ilchenko Автор вопроса

Ап, может кто знает что подкрутить можно

0

31.08.2021

Konstantin Ilchenko Автор вопроса

Denny [Altinity]
чего? это же специально сделано так.

ну условно делается что-то тяжёлое с таблицей t1 on cluster минут на 20, в это время другой процесс запускает drop partition on cluster на t2, и он отваливается по таймауту и падает пайплайн у нас из-за этого, хотя drop это простая операция. Получается только отказываться от on cluster и запускать вручную на шардах?

0

31.08.2021

Denny [Altinity]

Konstantin Ilchenko
ну условно делается что-то тяжёлое с таблицей t1 o...

эээ , при чем тут oncluster ? покажите с какой ошибкой падает ваш drop

0

31.08.2021

Konstantin Ilchenko Автор вопроса

Denny [Altinity]
эээ , при чем тут oncluster ? покажите с какой оши...

DB::Exception: Watching task /clickhouse/task_queue/ddl/query-0000620939 is executing longer than distributed_ddl_task_timeout (=300) seconds. There are 1 unfinished hosts (0 of them are currently active), they are going to execute the query in background (version 21.3.15.4 (official build)) (from 10.64.128.14:54140) (in query: ALTER TABLE analytics_adjust_events_tmp_shard ON CLUSTER ch_shards DROP PARTITION 20210825

0

31.08.2021

Konstantin Ilchenko Автор вопроса

Denny [Altinity]
эээ , при чем тут oncluster ? покажите с какой оши...

при этом видно что пока первый ddl не закончит работать, в ЗК в пути /clickhouse/task_queue/ddl/query-0000620939/active пусто, обработка запроса даже не начинается

0

31.08.2021

Denny [Altinity]

Konstantin Ilchenko
DB::Exception: Watching task /clickhouse/task_queu...

ну on cluster тут ни при чем. Без oncluster, drop будет также ждать, потом ваш клиент отвалится по таймауту. TTL можно менять моментально если надо, но тогда не будет пересчитываться TTL info

0

31.08.2021

Denny [Altinity]

Konstantin Ilchenko
при этом видно что пока первый ddl не закончит раб...

не правда. Все вообще не так

0

31.08.2021

Konstantin Ilchenko Автор вопроса

Denny [Altinity]
ну on cluster тут ни при чем. Без oncluster, drop ...

так без on cluster drop проходить если запустить на каждой ноде отдельно

0

31.08.2021