184 похожих чатов

День добрый. Есть такой запрос: SELECT any(device) AS

device,
any(line_item_id) AS line_item_id,
any(tactic) AS tactic,
any(target) AS target,
any(line_item_name) AS line_item_name,
any(line_item_name_2) AS line_item_name_2,
any(outside_target_dma) AS outside_target_dma,
any(creative) AS creative,
date AS date,
any(inside_target_dma) AS inside_target_dma,
toFloat64(sum(impression * __sign)) AS impression,
any(channel) AS channel,
__account_id AS account_id
FROM impressions_4930
GROUP BY
date,
__account_id,
__row_hash,
__row_id
HAVING sum(__sign) > 0
Таблица использует CollapsingMergeTree, поля в GROUP BY составляют ключ сортировки, короче - используем способ из документации для выполнения агрегаций без SELECT...FINAL. Правда, запрос превышает лимиты по памяти. Я последовательно снижал значение max_bytes_before_external_group_by и в итоге достиг значения в 20000000 (20 мегабайт), но результат не меняется:
Code: 241. DB::Exception: Received from localhost:9000. DB::Exception: Memory limit (for query) exceeded: would use 46.57 GiB (attempt to allocate chunk of 4216924 bytes), maximum: 46.57 GiB: While executing AggregatingTransform.
В чем может быть причина?

3 ответов

6 просмотров

HAVING пробовали убирать?

Andrey- Автор вопроса
Slach [altinity]
HAVING пробовали убирать?

емнип да, та же фигня. сейчас еще раз запустил запрос без него

set distributed_aggregation_memory_efficient=1 set aggregation_memory_efficient_merge_threads=2

Похожие вопросы

Обсуждают сегодня

Интересно, нет ли какого-то способа получить из dll не адрес самой метки, а адрес со смещением?
The Bird of Hermes
54
generic procedure function test<T>(param: T); type case T of longint: NewT = word; longword: NewT = byte; end; var v1: NewT; Как это можно сделать? Чтобы у меня...
notme
21
Делал задачу вот такую https://stepik.org/lesson/4985/step/9?unit=1083 получилось такое https://play.haskell.org/saved/ipKrepqe оно работает, тестов много не писал, но работае...
Fedor
22
Всем добрый вечер. Нужна помощь с прикруткой telegram-vapor-bot к проекту Vapor. Удалось после старта приложения отправить тестовое сообщение в бот, вот только сразу после это...
advanc3d
3
program Project1; procedure generic_proc<T>(); begin end; begin generic_proc<Int64>(0); end. Я чет не понял, а как в Delphi сделать такое? процедуру-дженерик... PS: а на...
notme
10
Кстати, что FPC мешает сделать нормальные проперти в юнитаз, завызанные на переменные? Нет, инлайнинг геттеров и геттеров кажется работает в принципе, но это же сколько лишн...
Arioch The
8
Всем привет, все время юзал бандлы, но появилась задача по базовому образу и команда werf build не пушит образ werf build --config='./root/werf.yaml' --repo ${CI_REGISTRY_IMAG...
Илья Корж
4
Хотел уточнить: копирование из одного рекорда в другой однотипный рекорд можно только по полям отдельно или можно чохом, типа Assign?
Ed Doc
9
Sometimes I like to solve problems the hard way. What do I mean? You know many problems can be fixed by restarting the system, but how much do you learn about the system? P...
Matthias Hoffmann
2
Похоже опять туплю задача https://stepik.org/lesson/5431/step/8?unit=1132 код и его работа https://play.haskell.org/saved/lmYTShXM на мой взгляд все правильно, и даже избыто...
Fedor
8
Карта сайта