Коллеги, в целом в доке понятно написано, но все же

Question

Коллеги, в целом в доке понятно написано, но все же

сие удивительно и потому уточняю - КХ таки не материализует CTE в памяти ?....

Нет никаких вариантов написать запрос, в котором как то материализовать результат CTE в памяти, и потом обращаться к нему несколько раз?

Ну кроме времянок с Engine=Memory..

Общая задача - написать сложный запрос для отчета в суперсете, который отсканирует 1 раз относительно емкую витрину, свернет ее в небольшую CTE, и потом уже из нее соберет датасет для отчета.

#backend #clickhouse #database #devops #programming #russian

0

09.09.2023

15 ответов

11 просмотров

Игорь Стерхов Автор вопроса

0

09.09.2023

Игорь Стерхов Автор вопроса

William Ko
А в чем проблема сделать материлизацию с engine=me...

Ну учётка суперсета по определённым причинам имеет права только на селекты. Ну чтобы сервер аналитики не положили создавая времянки на всю память и тд, как я понимаю

0

09.09.2023

William Ko

Игорь Стерхов
Ну учётка суперсета по определённым причинам имеет...

аааа всё понял. вы хотите после того как чарт построен память высвободить. Ну да была бы полезная фича.

0

09.09.2023

Dmitry [Altinity] Titov

Игорь Стерхов

Вариант есть через сбор строк в скаляр с помощью groupArray(tuple()) и использованием его

0

10.09.2023

Sergey Platonov

Игорь Стерхов
Ну учётка суперсета по определённым причинам имеет...

в подобных случаях обычно можно обратиться к админам/разработке за а) ревью вашего запроса б) созданием матвью наконец, можно же подзапросы использовать, запихните ваш мегатяжелый скан в первый подзапрос и алга

0

10.09.2023

Игорь Стерхов Автор вопроса

Sergey Platonov
в подобных случаях обычно можно обратиться к админ...

Если на уровне етл материализовать это ок, просто требует доп время на разработку, мержи, рефакторинг, а то и перезаливка исторических данных а замечания и предложения по доработке поступают по неск раз в день, вот и прикручиваешь в итоге на уровне отчетного запроса новые фичи/костыли Если через подзапросы то по сути полносью переписать логику придется, то есть рефакторинг. Или можно подзапросы аля как кте использовать как то ?

0

10.09.2023

Sergey Platonov

Игорь Стерхов
Если на уровне етл материализовать это ок, просто ...

«вот и прикручиваешь в итоге на уровне отчетного запроса новые фичи/костыли» таких бы я еще больше ограничивал )))

0

10.09.2023

Игорь Стерхов Автор вопроса

Sergey Platonov
«вот и прикручиваешь в итоге на уровне отчетного з...

сами себя поди в край ограничили там?)

0

10.09.2023

Sergey Platonov

Игорь Стерхов
сами себя поди в край ограничили там?)

я в разных проектах в разных ролях. Так что есть где меня ограничивают и есть где я. Но нигде не позволяю себе запросы работающие больше 5-6с, 10 - край.

0

10.09.2023

Sergey Platonov

почему же ничем перенос where на уровень подзапроса до JOIN бывает дает результат

0

10.09.2023

Игорь Стерхов Автор вопроса

Sergey Platonov
«вот и прикручиваешь в итоге на уровне отчетного з...

в общем, давайте всем чатом похлопаем вам ) исходный вопрос был немного другой

0

10.09.2023

Sergey Platonov