Приветствую коллективный разум )) Есть табличка для некоей оптимизации - туда

Question

Приветствую коллективный разум )) Есть табличка для некоей оптимизации - туда

сыпятся данные через матвью
create table if not exists TrackOpt
(
dt DateTime,
channel_id UInt32,
tag_id UInt32,
reqs UInt64,
opps Int64,
imps UInt64
)
engine = SummingMergeTree ORDER BY (dt, channel_id, tag_id)
TTL dt + toIntervalMinute(10)

Собсно нужна чтоб быстро добыть топ-данныч за последние 10 мин не ползая по большой базе

но вот select count(*) from system.parts where table='TrackOpt'; вывел аж 4тыс кусков. Активных 12. Осальные неактив. И таблица на диске занимает фж целый гигабайт а там 200тыс строк всего. ОТчего не удаляются. Может как-то не так надо реализовывать подобную идею?

#backend #clickhouse #database #devops #programming #russian

0

23.11.2021

4 ответов

4 просмотра

Denny [Altinity]

неактивные куски не учавствуют в запросах, их кол-во не имеет значения

0

23.11.2021

VячеслаV Владимиров Автор вопроса

Denny [Altinity]
неактивные куски не учавствуют в запросах, их кол-...

а, ну ок, спасибо. Не стоит их как-то сносить? Или та самая ttl_only_drop_parts?

0

23.11.2021

Denny [Altinity]

VячеслаV Владимиров
а, ну ок, спасибо. Не стоит их как-то сносить? Или...

??? они только 8 минут живут, перестаньте инсертить и они сразу исчезнут

0

23.11.2021

Konstantin Ilchenko · Accepted Answer

Konstantin Ilchenko

Я так понимаю постоянные удаления генерируют много лишних операций, я бы попробовал партиционировать по 10 минут например и добавить settings ttl_only_drop_parts = 1, тогда будут максимум за 20 минут данные, но диск не будет страдать

0

23.11.2021

184 похожих чатов

Приветствую коллективный разум )) Есть табличка для некоей оптимизации - туда

4 ответов

Похожие вопросы