Простите за глупый вопрос. В доках написано, что КХ использует

Question

Простите за глупый вопрос. В доках написано, что КХ использует

сжатие. Если у нас дефолтные настройки, будет ли сжатие данных на диске?
<compression incl="clickhouse_compression">
<case>
<min_part_size>10000000000</min_part_size>
<min_part_size_ratio>0.01</min_part_size_ratio>
<method>zstd</method>
</case>
</compression>
Вообще возможно как то "упаковать" данные на диске, чтобы они меньше места занимали?

#backend #clickhouse #database #devops #programming #russian

0

09.02.2021

18 ответов

2 просмотра

【D】【J】

Правильный order by +encoding иногда может зарешать. Надо знать данные

0

09.02.2021

Dmitry Lukovkin Автор вопроса

【D】【J】
Правильный order by +encoding иногда может зарешат...

там тупо логи лежат

0

09.02.2021

Aleksey Barabanov

по умолчанию пакует LZ4 https://clickhouse.tech/docs/ru/sql-reference/statements/create/table/#codecs вот тут можно почитать про кодаки сжатия, иногда можно ооооочень эффективно пожать поигравшись кодаками индивидуально для столбцов

0

09.02.2021

Aleksey Barabanov

Dmitry Lukovkin
там тупо логи лежат

а эффективность текущего сжатия какая?

0

09.02.2021

【D】【J】

Dmitry Lukovkin
там тупо логи лежат

Текстовые? Тогда только увеличить степень компрессии zstd

0

09.02.2021

Dmitry Lukovkin Автор вопроса

Aleksey Barabanov
а эффективность текущего сжатия какая?

как узнать?

0

09.02.2021

Aleksey Barabanov

Dmitry Lukovkin
как узнать?

SELECT database, table, name, compression_codec, round(sum(data_compressed_bytes) / 1024/1024/1024, 2) as size_gb, round(sum(data_uncompressed_bytes) / 1024/1024/1024, 2) as size_uncompressed_gb, round(size_gb/size_uncompressed_gb*100,2) perc FROM system.columns GROUP BY database,table, name, compression_codec HAVING size_gb>0.1 ORDER BY name ASC,table ASC

0

09.02.2021

Dmitry Lukovkin Автор вопроса

【D】【J】
Текстовые? Тогда только увеличить степень компресс...

Можно уже к существующим таблицам менять кодек?

0

09.02.2021

Aleksey Barabanov

Dmitry Lukovkin
Можно уже к существующим таблицам менять кодек?

можно к существующим полям

0

09.02.2021