Подскажите верно ли так делать? бестпрактисы и все такое.. Нужно

Question

Подскажите верно ли так делать? бестпрактисы и все такое.. Нужно

горячие данные хранить на ссд. До сего момента было все в дефолте на шпинделях.
- Добавил диск, создал политику, где первым томом указал новую ссд, чтоб все там хранилось, а вторым - дефолт.
- +правило на перемещение партов больше 200mb и move-factor 30% чтоб не насиловать ссд

yandex:
storage_configuration:
disks:
default:
keep_free_space_bytes: '1073741824'
hot_storage:
path: /opt/clickhouse-hot-storage/
policies:
default:
volumes:
default:
disk: default
hot_storage_policy:
volumes:
hot_storage_volume:
disk: hot_storage
max_data_part_size_bytes: '200000000' # 200mb
default:
disk: default
move_factor: '0.3'
Правильно ли сделал, что hot_storage первым томом идет?

#backend #clickhouse #database #devops #programming #russian

0

28.09.2023

8 ответов

15 просмотров

Сергей Худояров Автор вопроса

Elena Fedorenko
похоже, что этот код генерируется по шаблону, поэт...

это видимо не мне?)

0

28.09.2023

Konstantin Ilchenko

Сергей Худояров
это видимо не мне?)

это бот

0

28.09.2023

Konstantin Ilchenko

почему такой маленький размер парта? этож почти сразу всё будет на HDD переноситься. Ваша задача по максимуму на SSD данные помержить чтобы HDD не насиловать. Ну и да, если hot первым, то вставка на него, это ок

0

28.09.2023

Holo Wasserfall

Не уверен, что в первой секции должен быть default, но точно не буду утверждать.

0

28.09.2023

Илья Коргун

А как иначе может быть? Если горячими считать не самые свежие данные, а использовать какой-то другой принцип, то и на уровне конфига (и TTL) это зарулить уже не получится. Придётся с помощью внешнего сервиса писать циклическую процедуру, которая будет заниматься перемещением

0

28.09.2023

Сергей Худояров Автор вопроса

Konstantin Ilchenko
почему такой маленький размер парта? этож почти ср...

спасибо! выставил в 1гб. Меня смутило, что самые свежие парты совсем крохотные

0

28.09.2023

Konstantin Ilchenko

Сергей Худояров
спасибо! выставил в 1гб. Меня смутило, что самые с...

лучше посмотрите какой размер в среднем становится через неделю например, маленькие файлы по многу раз между собой мержатся чем вызывают большую нагрузку на диск

0

28.09.2023

Elena Fedorenko · Accepted Answer

Elena Fedorenko

похоже, что этот код генерируется по шаблону, поэтому он такой. Его не человек пишет

0

28.09.2023

184 похожих чатов

Подскажите верно ли так делать? бестпрактисы и все такое.. Нужно

8 ответов

Похожие вопросы