success stories больших инсталляций VictoriaMetrics? Особенно интересует на несколько ДЦ. О multi-level cluster setup доку почитал.
https://docs.victoriametrics.com/Cluster-VictoriaMetrics.html#multi-level-cluster-setup
Если еще следующие вопросы:
* какие лимиты на кол-во метрик и данных в проектах или каких-то более низких сущностях. То есть как решается проблема горячих шардов или особо жирных проектов. Чтобы вставка и расчёт агрегатов не захлёбывались.
* есть ли возможность как-то считать агрегаты по нескольких projectId? Или это странная хотелка? Сценарий: юзеры живут со своими мониторингами в своих проектах, есть Ops, вот бы Ops‘ам смотреть на состояние всех инсталляций, чтобы не дублировать сигналы в свой projectId.
Касательно планирования обратите внимание на https://docs.victoriametrics.com/Single-server-VictoriaMetrics.html#capacity-planning + можете потестировать инсталяции через https://github.com/VictoriaMetrics/benchmark
* какие лимиты на кол-во метрик и данных в проектах VM состоит из несколькоих компонентов: для вставки, для выборки и для хранения данных. Каждый из компонентов содержит свои конфигурируемые лимиты. Дополнительно, VM предоставляет агент для сбора метрик/процессинга вставок - и в нем тоже есть лимиты. Например, лимиты на кардинальность. Кроме того, компоненты для выборки и вставки независимы и не имеют состояния. Это значит, вы можете запускать более одного набора таких компонентов с разными настройками и лимитами. Все лимиты применяются глобально, а не по проектам. Но никто не мешает запускать несколько компонентов/агентов с разными лимитами. * То есть как решается проблема горячих шардов или особо жирных проектов Думаю, эта проблема везде одинаково решается - выводом жирных проектов в отдельные кластера. Если какой-то из проектов генерирует 80% нагрузки - не имеет смысла коллокейтить его с остальными проектами (проекты по-меньше всегда будут страдать). В остальном, есть лимиты на кол-во запросов, их время выполнения, их сложность и т.д. Почитайте документацию чтобы посмотреть все лимиты * есть ли возможность как-то считать агрегаты по нескольких projectId? Такой возможности нет, проекты полностью изолированы и нельзя прочитать данные с нескольких. Где-то на гитхабе есть фичереквест на этот счет - можете подробнее описать свой кейс там. VM это community-driven проект, и реализуются те фичи, на которые идет наибольший спрос. Есть еще workaround - использование promxy. Он умеет группировать данные с разных источников (в вашем случае разных проектов). У него тоже есть специфика и ограничения, но все же рекомендую ознакомиться. На счет примеров/видео - как уже рекомендовали посмотрите здесь https://docs.victoriametrics.com/Articles.html#third-party-articles-and-slides-about-victoriametrics Четких примеров для ответа на ваш вопрос у меня нет - не все компании пишут публичные статьи.
Больше спасибо за развёрнутый ответ! Сейчас за рулем, более детально позже вчитаюсь и помедитирую над этим.
Обсуждают сегодня