184 похожих чатов

Всем привет. Мы использовали кликхаус кластер в кубере: версия 23.3,

8 CPU, 30 Gb memory. И по графикам видно было, что memory for queries ~9-10Gb. Мы подняли новый кластер рядом с теми же характеристиками и переехали но него. После переезда запросы выполняются на 20-30% медленнее. И я по графику вижу, что теперь на запросы выделяется ~3Gb. Версия кликхауса теперь 23.8. Как повлиять на то, чтобы кликхаус использовал больше памяти?
Я пробовал задавать max_memory_usage=18Gb, max_threads=24. Это ситуацию не лучшает. Да и дефолтные значения flexible, то есть не должны ограничивать использование ресурсов, если я правильно понял.
спасибо

12 ответов

27 просмотров

Попробуйте выставить compatibility в 23.3 что нибудь изменилось с производительностью?

Stas-Dombrovskyi Автор вопроса
Dmitry [Altinity] Titov
Попробуйте выставить compatibility в 23.3 что нибу...

простите, не понял. Я не нашел информации о значительных изменениях между 23.3 и 23.8

Stas Dombrovskyi
простите, не понял. Я не нашел информации о значит...

│ compatibility │ │ 0 │ Changes other settings according to provided ClickHouse version. If we know that we changed some behaviour in ClickHouse by changing some settings in some version, this compatibility setting will control these settings │ ᴺᵁᴸᴸ │ ᴺᵁᴸᴸ │ 0 │ String │ Настройка такая, уровня профиля пользователя

Stas-Dombrovskyi Автор вопроса
Dmitry [Altinity] Titov
│ compatibility ...

спасибо. И мне присвоить ей "23.3" и посмотреть изменится ли что-то... ок. А все равно вопрос: как можно "попросить" кликхаус использовать больше памяти?

Stas Dombrovskyi
спасибо. И мне присвоить ей "23.3" и посмотреть из...

> спасибо. И мне присвоить ей "23.3" и посмотреть изменится ли что-то... ок. Да

Stas-Dombrovskyi Автор вопроса
Dmitry [Altinity] Titov
> спасибо. И мне присвоить ей "23.3" и посмотреть ...

ничего не изменилось. Значит в чем-то еще проблема. На всякий случай, повторюсь: можно как-то попросить кликхаус кушать больше памяти?

Stas-Dombrovskyi Автор вопроса
Алексей Осипов
Set max memory usage. Вроде так

так по умолчанию стоит 0, то есть неограничено, верно? И я ставил 18 Гб - ничего не поменялось

Stas Dombrovskyi
ничего не изменилось. Значит в чем-то еще проблема...

Да никак. Вам надо искать конкретный запрос и делать воспроизводимый пример.

Stas-Dombrovskyi Автор вопроса
Denny [Altinity]
Да никак. Вам надо искать конкретный запрос и дела...

вы говорите об экспериментах с эффективностью построенного запроса? можно ли его оптимизировать и все такое?

Stas Dombrovskyi
вы говорите об экспериментах с эффективностью пост...

Я говорю искать регрессию. Возможно есть параметр который выключает фичу. Но скорее всего это prewhere. Попробуйте where поменять на prewhere

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта