@Valyala Я могу к примеру: 10 экземпляров ВМ подключить

Question

@Valyala Я могу к примеру: 10 экземпляров ВМ подключить

к этому, одному GCP persistent disk, и направить в них 100 000 RPM? С объемом от 1 до 500 000 000(у нас сейчас такие лимиты на чтение из Графита) datapoints?

#metrics #programming #russian

0

31.10.2019

4 ответов

18 просмотров

Aliaksandr Valialkin

GCP persistent disk нельзя использовать с нескольких компов одновременно. Он подключается только к одному компу. Его производительность (bandwidth & iops) растет линейно с размерами этого диска. И этот диск можно динамически расширять до 257 терабайт без остановки операционной системы.

0

31.10.2019

Aliaksandr Valialkin

100K rpm - это 1.7K rps. Такую нагрузку может выдержать и single-node victoriametrics, если приходят "легкие" запросы по небольшому количеству уникальных временных рядов за небольшой интервал времени. См. https://medium.com/@valyala/measuring-vertical-scalability-for-time-series-databases-in-google-cloud-92550d78d8ae . Если же это тяжелые запросы по десяткам тысяч временных рядов с сотнями миллионов точек, то такой rps даже здоровенный кластер кликхаус не потянет :)

0

31.10.2019

Aliaksandr Valialkin

ВМ может просканировать 500М точек за 10 секунд на одном ядре. Скорость сканирования масштабируется линейно на имеющиеся ядра, как и у кликхауса. Поэтому на 20 ядрах запрос займет полсекунды.

0

31.10.2019

Roman Khavronenko · Accepted Answer

Roman Khavronenko

не обязательно иметь один persistent disk - лучше диск на каждый шард. Шардирование в данном случае как раз и обеспечит горизонтальное скалирование. Независимо можно отскейлить и vm-select сервисы, что тоже улучшит скорость чтения данных

0

31.10.2019

171 похожих чатов

@Valyala Я могу к примеру: 10 экземпляров ВМ подключить

4 ответов

Похожие вопросы