Clickhouse для крипто-трейдинговой системы (хранение всех изменений по кривтовалютам). Данных будет относительно немного (3млн записей в сутки), на каждую запись есть timestamp
Мы настроили запись, в батче работает быстро, никаких проблем с этим нет. Вопрос в чтении: будет много читающих запросов по выбору 1000-10000 записей.
Подходит ли Clickhouse для таких задач?
много - это сколько в секунду? под 1-10к записей вы имеете в виду что они по главному индексу последовательно лежат? какие запросы - кх не любит сложных джойнов?
вроде бы да, просто все зависит от того, как вы спроектируете свою систему
Если крипто-трейдинговая система планирует существовать хотя бы пару лет, и база все это время будет только расширяться, то в в использовании CH есть некоторый смысл. Но важно понимать, какого типа запросов вы ждете и что такое "много".
Всё так и планируется, расширяться конечно будет. 3млн записей в сутки. Смотрим также в сторону Cassandra, но как-то Clickhouse приятней чтоли в использовании. Вот пример строки данных, которых будет 3млн в сутки. И запрос, который будет чаще всего выполняться. Не будет ли возникать проблем при 10000 запросов в секунду идентичных? Иногда проскакивает время запроса - 0.5-0.7 сек даже на небольшом кол-ве данных
Джойнов вообще не будет, специально храним всё линейно. 10к записей - не корректно написал. Расчитываем на 1-10к запросов в секунду на чтение записей В выборке будет думаю не более 1000 результатов
я тут аналитики не вижу. может это вообще ближе к nosql? или in-memory dbms
Обсуждают сегодня