device,
any(line_item_id) AS line_item_id,
any(tactic) AS tactic,
any(target) AS target,
any(line_item_name) AS line_item_name,
any(line_item_name_2) AS line_item_name_2,
any(outside_target_dma) AS outside_target_dma,
any(creative) AS creative,
date AS date,
any(inside_target_dma) AS inside_target_dma,
toFloat64(sum(impression * __sign)) AS impression,
any(channel) AS channel,
__account_id AS account_id
FROM impressions_4930
GROUP BY
date,
__account_id,
__row_hash,
__row_id
HAVING sum(__sign) > 0
Таблица использует CollapsingMergeTree, поля в GROUP BY составляют ключ сортировки, короче - используем способ из документации для выполнения агрегаций без SELECT...FINAL. Правда, запрос превышает лимиты по памяти. Я последовательно снижал значение max_bytes_before_external_group_by и в итоге достиг значения в 20000000 (20 мегабайт), но результат не меняется:
Code: 241. DB::Exception: Received from localhost:9000. DB::Exception: Memory limit (for query) exceeded: would use 46.57 GiB (attempt to allocate chunk of 4216924 bytes), maximum: 46.57 GiB: While executing AggregatingTransform.
В чем может быть причина?
HAVING пробовали убирать?
емнип да, та же фигня. сейчас еще раз запустил запрос без него
set distributed_aggregation_memory_efficient=1 set aggregation_memory_efficient_merge_threads=2
Обсуждают сегодня