Приветствую Пытаюсь через clickhouse-copier скопировать одну партицию таблицы В настройках copier

Question

Приветствую Пытаюсь через clickhouse-copier скопировать одну партицию таблицы В настройках copier

<enabled_partitions>
<partition>('2022-09-05',200)</partition>
</enabled_partitions>
При запуске задачки, copier начинает прогонять запрос и он висит очень долго, из-за того что не используются индексы
SELECT 1 FROM rtb.table_name WHERE (toMonday(event_date), st) = (('2022-09-05', 200) AS partition_key) LIMIT 1
Как правильно скопировать партицию или объяснить copier чтобы использовал индексы?

#backend #clickhouse #database #devops #programming #russian

0

01.06.2023

5 ответов

24 просмотра

Oleg M Автор вопроса

Denny [Altinity]
партиции можно атачить (копировать) в другие табли...

Интересно. Но у меня шардированная таблица с репликацией, получается на каждом шарде нужно будет создать по таблице, чтобы это сработало?

0

01.06.2023

Denny [Altinity]

Oleg M
Интересно. Но у меня шардированная таблица с репли...

получается

0

01.06.2023

Oleg M Автор вопроса

Да, все получилось благодарю. Еще интересный эффект заметил, у меня в шардированной таблице есть TTL на колонку и из-за этого copier не позволяет сделать перенос (он внутри видимо distributed создает, а они с TTL не возможны), приходится указывать disributed таблицы, чтобы он от туда переносил. Это можно как-то обойти или так и задумано все?

0

01.06.2023

Denny [Altinity]

Oleg M
Да, все получилось благодарю. Еще интересный эффе...

не знаю, похоже на баг. Я бы завел issue

0

01.06.2023

Denny [Altinity] · Accepted Answer

Denny [Altinity]

партиции можно атачить (копировать) в другие таблицы и это бесплатная операция (не используется диск, не используется процессор) т.е. создаете новую таблицу, alter table ... attach partition from далее копиром копируете новую таблицу

0

01.06.2023

184 похожих чатов

Приветствую Пытаюсь через clickhouse-copier скопировать одну партицию таблицы В настройках copier

5 ответов

Похожие вопросы