Добрый вечер. Есть таблица time-series данных (append-only), предполагается рост объема

Question

A.M.

Добрый вечер. Есть таблица time-series данных (append-only), предполагается рост объема

на 50 ГБ в сутки. Читать тоже планируется много, в основном не очень большими блоками с выборкой по времени.

Подскажите, чем можно разбить таблицу одновременно и на секции (автоматически, по времени), и на шарды (между серверами, по какому-нибудь group_id например)? Или лучше как-то иначе обращаться с такими данными?

Думал про timescaledb + citus, но толком не нашел информации, могут ли они работать вместе.

#backend #devops #pgsql #programming #russian

0

28.11.2019

3 ответов

11 просмотров

A

Я бы посмотрел в сторону greenplum

0

28.11.2019

Sergey Evseev

По поводу timescaledb и citus - сделайте небольшой тестовый кластер, достаточно даже на одном сервере, один сервер координатор и два шарда. На все поставьте и включите расширения timescaledb и citus. На координаторе создайте тестовую hypertable и потом поробуйте ее шардировать citus. Думаю это даст ответ на вопрос. Покидать туда данные и посмотреть что будет. По идее если работают, то у вас данные в зависимости от признака должны разделиться на ваши ноды и там быть разделены на шарды, каждый из которых будет hypertable

0

29.11.2019

Maksim Milyutin · Accepted Answer

Maksim Milyutin

Timescale db сами недавно запилили шардинг, правда скорее всего он доступен в платной версии. Можете поискать у них в блоге инфу

0

28.11.2019

172 похожих чатов

Добрый вечер. Есть таблица time-series данных (append-only), предполагается рост объема

3 ответов

Похожие вопросы