Можно её сжать, чтобы например данные за целый день сохранялись,

Question

Можно её сжать, чтобы например данные за целый день сохранялись,

а посекундные записи удалялись? (и нужно, чтобы действия группировались, от одного человека, в определённом месте (таблица одна))

#backend #clickhouse #database #devops #programming #russian

0

08.09.2021

8 ответов

15 просмотров

palinaaaaaa 👽 Автор вопроса

вариантов нет?

0

08.09.2021

Alexey Sokolov

Можно сделать рядом таблицу с движком AggregatingMergeTree, которая будет бессрочно хранить нужные вам агрегации (количество действий по пользователю за день, какие-нибудь суммы, строгие значения и т.п.), настроить её заполнение через MaterializedView, а для таблицы с сырыми данными настроить TTL, чтобы записи старше трёх месяцев, например, удалялись.

0

08.09.2021

palinaaaaaa 👽 Автор вопроса

Konstantin Ilchenko
мне кажется вам стоит почитать про движок SummingM...

хм, просто не понятно, можно ли будет реализовать сжатие данных через неделю, чтобы те данные, которые были сохранены превращались в одну запись с определённым днём (точное время не нужно, нужна лишь дата)

0

09.09.2021

Konstantin Ilchenko

palinaaaaaa 👽
хм, просто не понятно, можно ли будет реализовать ...

это обычно две разных таблицы, в одной сырые данные которые хранятся ограниченное время и во второй агрегированные данные которые хранятся долго, materialized view пишет из первой во вторую

0

09.09.2021

Denny [Altinity]

https://kb.altinity.com/altinity-kb-queries-and-syntax/ttl/ttl-group-by-examples/

0

09.09.2021

palinaaaaaa 👽 Автор вопроса

Denny [Altinity]
https://kb.altinity.com/altinity-kb-queries-and-sy...

а с ReplacingMergeTree будет работать?

0

09.09.2021

Denny [Altinity]