Кстати, кто успешно наращивал количество шардов, как это работает с

Question

Кстати, кто успешно наращивал количество шардов, как это работает с

distributed-запросами? То есть было 3 шарда, стало 5, допустим, шардил по интовому полю. Как теперь селекты будут работать?
Например, все x mod 3 == 0 шли на шард 0, а теперь - только x mod 5 == 0, т.е. из старых данных там будут 0,3,6,…, а из новых - только 0, 5, 10, …
Движок же не знает, что часть, например, пятерок - на одном хосте, а часть - на втором

#backend #clickhouse #database #devops #programming #russian

0

21.04.2019

1 ответов

6 просмотров

Denny [Altinity] · Accepted Answer

distributed посылает запросы на локальные ноды без учета ключа шардирования, ей не важно как лили данные и как изменилось шардирование или кол-во нод. Пару месяцев назад spotify добавили параметр optimize_skip_unused_shards Пропуск неиспользуемых шардов в случае, если запрос SELECT содержит фильтрацию по ключу шардирования (настройка optimize_skip_unused_shards). #3851 (Gleb Kanterov, Ivan)

184 похожих чатов

Кстати, кто успешно наращивал количество шардов, как это работает с

1 ответов

Похожие вопросы