Коллеги, в документации написано, что в таблицы BUFFER не имеет

Question

Коллеги, в документации написано, что в таблицы BUFFER не имеет

смысла вставлять по одной строке, производительность не будет оптимальна; а вот к какому размеру вставляемых данных стремиться, не сказано.

Сориентируйте, пожалуйста.

Сейчас у нас по факту вставляется от, скажем, 3 до 300 строк за раз, и таких вставок, наверное, штук 50-60 в секунду (в разные буферные таблицы в сумме).

И ещё интересно - если ничего не менять, с какого количества инсертов в секунду мы упремся в потолок, при текущем размере инсерта?
То есть, насколько мы далеко от проблем)

#backend #clickhouse #database #devops #programming #russian

0

18.07.2018

2 ответов

23 просмотра

Dmitry Автор вопроса

Упс, то были искаженные данные. На самом деле от 1 до 50 строк инсерт, инсертов около тысячи в секунду. Но это всё в буферные таблицы. Параметры этих таблиц - по умолчанию.

0

18.07.2018

Дмитрий Бережнов · Accepted Answer

А кто формирует блоки "3 до 300 строк"? Может там стоит сделать батчинг до 1к и не использовать Buffer вообще? Я выработал правило для КХ (и не только) - делай как можно проще. Если написано в доке что лучше не использовать Buffer, а батчить на стороне приложения - делаю так

184 похожих чатов

Коллеги, в документации написано, что в таблицы BUFFER не имеет

2 ответов

Похожие вопросы