Всем привет, а arrayMap если внутрь пихнуть ещё одну функцию

Question

Всем привет, а arrayMap если внутрь пихнуть ещё одну функцию

высшего порядка всегда размножает массив? А то у меня нетипичная, даже странная задачка которую хочу решить на кх. Есть пара колонок prev_id, next_id, и нужно по цепочке собрать для самого первого остальные. Вложенность разумеется неизвестна заранее. Попробовал через Map + Filter и сел в лужу... есть возможность на каждый Map не генерировать кучу данных? А то в моем случае это
DB::Exception: Memory limit (for query) exceeded: would use 1.00 TiB при том что массив идшников весит 20мб

#backend #clickhouse #database #devops #programming #russian

0

24.01.2022

9 ответов

25 просмотров

Dmitry [Altinity] Titov

Пока наверное нет хорошего решения https://github.com/ClickHouse/ClickHouse/issues/29701

0

24.01.2022

Dmnk ninja Автор вопроса

Dmitry [Altinity] Titov
Пока наверное нет хорошего решения https://github...

жаль, не хочется выходить за рамки кх чтобы это реализовать, попробую закостылить, спасибо

0

24.01.2022

Dmitry [Altinity] Titov

Dmnk ninja
жаль, не хочется выходить за рамки кх чтобы это ре...

Можете попробывать накостылять с помощью external function

0

24.01.2022

Dmnk ninja Автор вопроса

Dmitry [Altinity] Titov
Можете попробывать накостылять с помощью external ...

вы про udf? или о чем речь

0

24.01.2022

Роман Болдырев

Можно попробовать через словари с layer(direct) решить, с помощью методов работы с иерархическими словарями, это единственный рекурсивный способ работы в КХ насколько я знаю. Ну или как писали выше "Dmitry [Altinity] Titov, [24.01.2022 19:55] [В ответ на Dmitriy] Можете попробывать накостылять с помощью external function"

0

25.01.2022

Dmnk ninja Автор вопроса

Роман Болдырев
Можно попробовать через словари с layer(direct) ре...

А можно ссылку на это?

0

25.01.2022

Dmnk ninja Автор вопроса

Роман Болдырев
Можно попробовать через словари с layer(direct) ре...

А то что не понимаю что за структура такая

0

25.01.2022