(vCPU, диски, сеть).
Реальных данных нет, нужны синтетические тесты.
Посоветуйте, пожалуйста, что лучше использовать из готовых тестов?
виктория либо прометеус есть? какое ядро? ebpf стоит? какое железо,
тестировать надо отдельно cpu, отдельно память отдельно сеть отдельно диски, обязательно надо ebpf exporter
Возможно, неправильно сформулировал изначально, сорри. Просто гонять викторию задачи нет. Задача именно развернуть CH и прогнать тесты типа TPC-DS.
В душе не знаю, что под капотом. Облако.
можно тут поискать https://benchmark.clickhouse.com/ https://github.com/ClickHouse/ClickBench/
ну вот зачем давать плохие советы. а потом люди сидят без мониторинга и не понимают что происходит
если в облаке, то базовые мониторинги есть, на хосты там все равно не пустят. тесты можно взять по ссылкам
если реальных данных нет, а запросы реальные и приложение есть?
Ничего нет. Есть некие виртуальные машины в облаке, на которые нужно накатить кликхаус и посмотреть, как он работает на них. Найти узкие места.
это делается не через кликхаус
Не через кликхаус уже сделано до нас, по железу вроде бы все ок. Потом ставишь тот же GP, даёшь нагрузку и начинается, диски не успевают, сеть лагает и полно сетевых ошибок.
а чере что? ну чего вы ерунду говорите... если основное приложение на хостах кликхаус... то на него и надо нагрузку давать какую-то... другое дело что давать синтетическую нагрузку... без привязки к реальной... бесполезно... синтетическую дают. чтобы просто сравнивать между собой разные серваки \ разный софт ... например, типа вот тут попугаев RPS больше... а latency меньше...
не может такого быть если тестили с ebpf+iperf и гоняли тесты для дисков и проца, ebpf это сразу показал бы от какой нагрузки начнутся ошибки
эмм, ничего нет, - это странно, бенчмаркать без подобия реальных данных ну токое
Уточню, что гоняли, с нами не делились подробностями. Спасибо за мнение!
стандартная тема в конторах без мониторинга, мы хости типа проверили, заббикс не ругается на состояние покоя, а дальше ставят софт и оказывается, что при нагрузкке в 2 гбита в сек, сеть ложится(частая проблема например в яндекс облаке)
эксплукатировать гп и клик без ebpf настроенного суицид в принципе
Скажем так, в будущем на этой инфре может быть несколько совершенно разных кластеров для разных проектов. Если не будет выявлено критических препятствий для этого.
вам ничем не помогут синтетические тесты, особенно весело, когда ваши 3-6 вм попадают на 1 хост, и проц в ауте хотя свободен на 3 из 4 вм
Понял, отметил, буду уточнять. Но с учётом того, что GP скорее жив - всё это есть.
Обсуждают сегодня