Всем привет! Падает запрос по отсутствию памяти. Вроде внес изменения

Question

Всем привет! Падает запрос по отсутствию памяти. Вроде внес изменения

в настройки, но не работает все же.

Что сделал:
set max_block_size=32768;
set max_bytes_before_external_group_by=8000000000;
set max_memory_usage=16000000000;
set max_threads=1;

Подскажите, что еще можно поменять, чтобы запрос не забивал РАМ ?

#backend #clickhouse #database #devops #programming #russian

0

28.08.2022

5 ответов

20 просмотров

Konstantin Ilchenko

Так а сам запрос какой? Только group by?

0

28.08.2022

Lev Автор вопроса

Konstantin Ilchenko
Так а сам запрос какой? Только group by?

В основном да, но есть еще и join. http://pastie.org/p/6CRrqPqjho5zvYf57JRkLm

0

28.08.2022

Slach [altinity]

Lev
В основном да, но есть еще и join. http://pastie.o...

из-за join в память не влезет попробуйте проекции active_users_per_day вполне может быть проекцией внутри STG_ETH.TRANSACTIONS вы там слишком намудрили с сабкверями через width преписывайте запрос и упрощайте

0

28.08.2022

Konstantin Ilchenko

Lev
В основном да, но есть еще и join. http://pastie.o...

Ну попробуйте join_algorithm поменять. Но в целом вы получается каждый день с нуля пересобираете стату? Надо думать как это делать инкрементально

0

28.08.2022

Кирилл Маньков · Accepted Answer

Кирилл Маньков

Можно тут попробовать лайфхаки https://www.youtube.com/watch?v=F-o-a00R4fc&list=PLBEnuutMvG4LlANEbobVX8reb7BwRCAwz&index=11&t=783s&ab_channel=%D0%A0%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0

0

28.08.2022

184 похожих чатов

Всем привет! Падает запрос по отсутствию памяти. Вроде внес изменения

5 ответов

Похожие вопросы