184 похожих чатов

Есть таблица src и Summing MV на неё src_country CREATE TABLE

default.src (
date Date,
datetime DateTime,
userId UInt64,
countryId UInt8,
typeId UInt8
) ENGINE = MergeTree(date, (userId, datetime), 8192)

CREATE MATERIALIZED VIEW default.src_country
(
date Date,
datetime DateTime,
userId UInt64,
recordsByCountryMap Nested(
countryId UInt8,
records UInt64
)
)
ENGINE = SummingMergeTree(date, (date, datetime, userId), 8192)
AS
SELECT
date,
toStartOfMinute(datetime) AS datetime,
userId,
[countryId] as recordsByCountryMap.countryId,
[count()] AS recordsByCountryMap.records
FROM default.src
GROUP BY
date,
datetime,
userId,
countryId

В документации движка SummingMergeTree указано, что производится суммирование для столбцов заканчивающихся на 'Map'.
Но если данные вставлены в разных пачках, то их суммирует только optimize либо они сами "когда-то" просуммируются.

Вопрос - есть ли агрегирующая функция, которая сложит соотвествующие значения по ключам? Или до-агрегацию в таком случае производить на стороне клиента в коде?

Пример:
SELECT *
FROM src_country

┌───────date─┬────────────datetime─┬─userId─┬─recordsByCountryMap.countryId─┬─recordsByCountryMap.records─┐
│ 2017-01-01 │ 2017-01-01 00:00:00 │ 1 │ [10] │ [4] │
└────────────┴─────────────────────┴────────┴───────────────────────────────┴─────────────────────────────┘
┌───────date─┬────────────datetime─┬─userId─┬─recordsByCountryMap.countryId─┬─recordsByCountryMap.records─┐
│ 2017-01-01 │ 2017-01-01 00:00:00 │ 1 │ [10] │ [4] │
└────────────┴─────────────────────┴────────┴───────────────────────────────┴─────────────────────────────┘
┌───────date─┬────────────datetime─┬─userId─┬─recordsByCountryMap.countryId─┬─recordsByCountryMap.records─┐
│ 2017-01-01 │ 2017-01-01 00:00:00 │ 1 │ [10,11] │ [4,3] │
└────────────┴─────────────────────┴────────┴───────────────────────────────┴─────────────────────────────┘

SELECT
datetime,
groupArray(recordsByCountryMap.countryId),
groupArray(recordsByCountryMap.records)
FROM src_country
WHERE userId = 1
GROUP BY datetime

┌────────────datetime─┬─groupArray(recordsByCountryMap.countryId)─┬─groupArray(recordsByCountryMap.records)─┐
│ 2017-01-01 00:00:00 │ [[10],[10],[10,11]] │ [[4],[4],[4,3]] │
└─────────────────────┴───────────────────────────────────────────┴─────────────────────────────────────────┘

1 ответов

14 просмотров
Alexandr-Bocharov Автор вопроса

@milovidov_an можете с этим помочь? Нашел в исходниках хитрый *ForEach модификатор, попробовал с sumForEach, делает почти то, что нужно, но вероятно не учитывает по каким ключам происходит суммирование. Смотрел также на groupArrayInsertAt, sequenceMatch но похоже не то.

Похожие вопросы

Обсуждают сегодня

Ну вот просто даже давайте вот как. Какой нибудь конкретный кейс, можете в пример привести, где бч работает и приносит прикладную пользу, а не просто что бы было? Не крипту.
Alexander Andreev
22
Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
> Копаем глубже > Следующий момент был, когда я спросил его, знает ли он JavaScript. Он ответил, что его учили работать с C#. Я тоже в университете писал на C#, но даже там мн...
Oleg Volkov
4
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
И никого не интересует какие пакеты кто использует. ((% Заходишь на сайт симфони и видишь поддержку Украины - по законам РФ это ж экстремизм. Только никто не отказывается от с...
Am Ambrion
11
Чтобы перехватить все нажимания буков на форме, надо хук ставить? Пробовал на форме ОнКейДаун, оно ловит клаву если фокус не на компоненте с вводом текста
Serjone
15
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
7
Народ! Впервые клиенту пришло письмо от РКН, у вас, дескать, есть яндекс метрика, а нигде не написано, что вы ее юзаете. Никто не сталкивался?
Sasha Beep
14
Всем привет! вывожу на общей стр дочерние ресурсыв каждом ресурсе галерея, и первая фотка должна выводиться на общей [!DocLister? &prepare=photo !]
Alekso
12
Добрый вечер. Хочу чтобы у меня в классе поле было функцией, которая возвращает строку. Делаю так: interface ... TGetOutPath = function : String of object; ... protec...
Kirill Filippenok
12
Карта сайта