184 похожих чатов

Добрый вечер, коллеги. А не подскажите, какими инструментами можно отловить

что именно в запросе отъедает много памяти?

12 ответов

29 просмотров

Я вам могу и без инструментов могу сказать ... Данные :)

https://altinity.com/blog/clickhouse-aggregation-fun-part-1-internals-and-handy-tools

Алексей-Горячев Автор вопроса
Константин
Я вам могу и без инструментов могу сказать ... Дан...

Данных немного(2,4,7млн строк). Но несколько джойнов. И где-то прям не хватает 10 гигов оперативы)

Алексей Горячев
Данных немного(2,4,7млн строк). Но несколько джойн...

Ну так JOIN полностью правую таблицу в память должен положить

Алексей-Горячев Автор вопроса
Константин
Ну так JOIN полностью правую таблицу в память долж...

от ORDER BY этой таблицы не зависит? всё равно целиком туда закинет?

Алексей-Горячев Автор вопроса
Константин
Ну, а причём он тут ?

подумалось, что если там будет столбец по которому джойнится таблица, то меньше памяти сожрет

Алексей-Горячев Автор вопроса
Denny [Altinity]
не используется ни индексы ни orderby для джойнов

то есть лучше через матвьюхи решать вопрос?

Алексей Горячев
то есть лучше через матвьюхи решать вопрос?

не понимаю чем тут матвьюхи помогут (тем более они работают в контексте одной таблицы, про джойны речи нету), скорее всего вам выше и сказали что JOIN может сжирать много памяти если набор строк в правой таблице очень большой.

самый лучший на мой взгляд способ set send_logs_level='trace', стоит пристально смотреть сколько aggregated X to Y rows и сколько засечек затрагивает Selected X/Y marks а дальше думать

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта