184 похожих чатов

Спасибо, а можно 8 минут как-то сократить до 1 минуты

или до нескольких секунд?

Как я понял гранулярность влияет на количество выставляемых засечек (и на объем от засечек), но не на объем хранения основных данных, при увеличении гранулярности с 8 тыс. до 32 тыс - сжатие не будет проводиться бОльшими или меньшими блоками.

Со сжатием тоже экспериментирую на уровне колонок, если я правильно понимаю сжатие таблицы это то же самое, только вариант "по умолчанию" - т.е. если не указываю сжатие для колонки.

ReplacingMergeTree - спасибо, посмотрел.
Мне к сожалению не подойдёт - мне надо хранить сырые логи веб-серверов, а при атаках там много очень одинаковых запросов, которые в такой таблице схлопнуться до одной записи в секунду.

3 ответов

8 просмотров

Можно сократить, как сказал @den_crane, если серверы с КХ не выключаются по питанию

Сжатие, что я имел ввиду - сжатие файлов с помощью lz4

Если логи веб серверов то играйтесь с сортировкой это сильно влияет на сжатие, как минимум сортируйте по локейшену, обычно для них данные +- похожи

Похожие вопросы

Обсуждают сегодня

Типа вызывать GetParent и проверять на соответствие GetModuleHandle?
The Bird of Hermes
67
Do any of you guys have interesting projects one could join? I'm a Middle Full-Stack developer (JS/TS, React & Node)
Lev Shapiro
40
Есть сайт. Там была древняя версия эво. Стоял плагин, который каждый коммент в Jot делал отдельной страницей. После обновления все слетело, теперь старница открывается отдельн...
Artem
1
$res = json_decode($наша строка из респонса); $res1 = array_map(fn($o) => $o->name, $res->breadcrumbs[0]->entities); Как такое будет на Хаскеле?.. В начале весь джейсон, в ко...
Хаскель Моисеевич Гопник
27
Добрый день. А shovel'ы можно как-то сконфигурировать в definitions.json? Пробовал что-то вроде: { "users": [ { "name": "agent", "password_hash": "RBCbTzQd...
Aleksey
1
Вопрос по диагностике ошибок (я знаю в чем, в данном конкретном примере, я знаю, как исправить, пример модельный, понятно, что в реальности бывает намного запутаннее). module...
ⰄⰎⰋⰐⰐⰑⰛⰤⰧⰧⰩⰄ ⰊⰑⰁⰓⰡⰛⰦⰕⰫ
11
В чем сила брат, в NASM или FASM?
Isaac Kleiner
18
А чем вам питонисты не угодили?😂
.
79
Есть какой-нибудь для Delphi/FPC T*Compression(Decompression)Stream на базе LZ4/Zstd/любой другой быстрый(и хорошо сжимающий) алгоритм А ещё лучше в pure pascal А ещё лучше од...
notme
52
Хтось використовував Vapor на Windows?
Jaroshevskii
15
Карта сайта