Друзья! А вот такой вопрос. До какого размера оправдано использование

Question

ClickHouse не тормозит

In Fis

Друзья! А вот такой вопрос. До какого размера оправдано использование

внешних словарей? По количеству строк, по размеру данных, по частоте добавления и изменения строк.

#backend #clickhouse #database #devops #programming #russian

0

26.12.2021

5 ответов

22 просмотра

Denny [Altinity]

в Альтинити есть клиенты которые покупают в GC машины с 700ГБ озу , чтобы создавать словари которые жрут 500Гб, причем их все устраивает, потому что по другому они задачу решить не могут.

0

26.12.2021

Denny [Altinity]

словари можно использовать например с лайаутом direct или cached ну и можно в словарь подтягивать только дельты из источника

0

26.12.2021

Dmitry [Altinity] Titov

Denny [Altinity]
словари можно использовать например с лайаутом dir...

> ну и можно в словарь подтягивать только дельты из источника Ну тут вопрос, насколько это будет быстрее для очень больших словарей, КХ же все равно будет создавать(?) новую хештаблицу, а не подправлять в старой.

0

26.12.2021

Denny [Altinity]

Dmitry [Altinity] Titov
> ну и можно в словарь подтягивать только дельты и...

я точно не помню, возможно так, это надо проверять на реальных данных.

0

26.12.2021

Dmitry [Altinity] Titov · Accepted Answer

Ну в целом вопрос насколько у вас хватит памяти. (может у вас ТБ оперативки есть) А так до десятков миллионов ключей, десятков ГБ в целом ок. Добавление-изменение обычно не так страшно, (ну разве что вы изменяете каждую секунду) и изменения должны быть отражены моментально.

184 похожих чатов

Друзья! А вот такой вопрос. До какого размера оправдано использование

5 ответов

Похожие вопросы