Всем привет. Хочу чуть больше понять кликхаус, чтобы понять подходит

Question

Всем привет. Хочу чуть больше понять кликхаус, чтобы понять подходит

мне данное решение или нет. Читая описание, сложилось ощущение, что может не подойти.
У меня задача писать в бд раз в n(предположим минуту) большой объем данных(статистику от IoT устройств). Значения для столбцов думаю могут превышать 60 байт и достигать килобайт.(За сутки будут проходить гигабайты данных)
Далее хочется на основании этой информации выводить всякие графики(В идеале data len прикрутить)
Но вот информация для графиков не выглядит, как мало столбов, много колонок. Похоже, что это будет много столбцов(сотни, тысячи, может больше), но в сравнении с общим кол-вом столбцов это должно быть мало.

Таким образом нарушаются вот эти рекомендации

- подавляющее большинство запросов - на чтение;
- при чтении, вынимается достаточно большое количество строк из БД, но только небольшое подмножество столбцов;
- значения в столбцах достаточно мелкие - числа и небольшие строки (пример - 60 байт на URL)
- при чтении, вынимается достаточно большое количество строк из БД, но только небольшое подмножество столбцов

При нарушении данных рекомендаций, я довольно сильно в производительности потеряю?

#backend #clickhouse #database #devops #programming #russian

0

02.10.2023

8 ответов

12 просмотров

. Автор вопроса

Petr Ivanov
не парься, пиши, потом разберёшься. Любой другой S...

Есть варик посмотреть в сторону InfluxDB например, но его нет в поддержке дата лен(

0

02.10.2023

Petr Ivanov

.
Есть варик посмотреть в сторону InfluxDB например,...

тогда это не варик :) ещё можно подумать точно ли все значения нужны с такой частотой

0

02.10.2023

. Автор вопроса

Petr Ivanov
тогда это не варик :) ещё можно подумать точно ли ...

Да, тоже думали об этом. Получается, что для аналитики такая частота действительно выглядит избыточной. Но так или иначе хочется хранить все события с такой частотой где либо.

0

02.10.2023

Artem Pershin

.
Есть варик посмотреть в сторону InfluxDB например,...

timescaledb попробуйте - это PostgreSQL как раз для IoT данных timeseries

0

02.10.2023

. Автор вопроса

Artem Pershin
timescaledb попробуйте - это PostgreSQL как раз дл...

Вроде как постгря плохо перерабатывает такой объем данных за сутки

0

02.10.2023