184 похожих чатов

Давайте я задау опишу Хочу запрос делать к AggregatingMergeTree без доагрегации,

бывает так что строки с идентичным первичным ключом не до конца аггрегированы.

Например такое
id1, 2
id1, 3
А ожидаю
id1, 5

Чтобы уменьшить такую вероятность, хочу запускать по крону OPTIMIZE TABLE, раз в 10 минут.

Вопрос: Какой запрос дает гарантии того что не осталось неслитых данных?

4 ответов

8 просмотров

Это не вариант, только хуже сделаете если так часто запускать optimize. Запросы к AggregatingMergeTree делаются только с доагрегацией, она для этого и создавалась

Загир-Нургалиев Автор вопроса
Konstantin Ilchenko
Это не вариант, только хуже сделаете если так част...

Напрямую запрос занимает 17 сек, с аггрегацией 3 минуты, из изначальной таблицы 10 минут. С потреблением памяти тоже похожая зависимость. вот я и думаю как лучше, что будет плохо? замедилтся вставка? чтение? блокировки какие-то будут?

Загир Нургалиев
Напрямую запрос занимает 17 сек, с аггрегацией 3 м...

А как вы делаете доагрегацию? Через group by? Замедлится всё, и чтение и запись. Проще делать пересчёт данных с нуля чем optimize final каждые 10 минут запускать

Загир-Нургалиев Автор вопроса
Konstantin Ilchenko
А как вы делаете доагрегацию? Через group by? Зам...

Да, group by по первичным ключам + groupArrayMerge()

Похожие вопросы

Обсуждают сегодня

Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
Ну вот просто даже давайте вот как. Какой нибудь конкретный кейс, можете в пример привести, где бч работает и приносит прикладную пользу, а не просто что бы было? Не крипту.
Alexander Andreev
22
объясните пожалуйста, почему функция не работает должным образом? вроде должно брать активное окно сравнивать его размер с размером экрана, и если есть совпадение = true прове...
JF
12
> Копаем глубже > Следующий момент был, когда я спросил его, знает ли он JavaScript. Он ответил, что его учили работать с C#. Я тоже в университете писал на C#, но даже там мн...
Oleg Volkov
4
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
И никого не интересует какие пакеты кто использует. ((% Заходишь на сайт симфони и видишь поддержку Украины - по законам РФ это ж экстремизм. Только никто не отказывается от с...
Am Ambrion
11
Чтобы перехватить все нажимания буков на форме, надо хук ставить? Пробовал на форме ОнКейДаун, оно ловит клаву если фокус не на компоненте с вводом текста
Serjone
15
Народ! Впервые клиенту пришло письмо от РКН, у вас, дескать, есть яндекс метрика, а нигде не написано, что вы ее юзаете. Никто не сталкивался?
Sasha Beep
14
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
8
Вопрос на перед, на следующую пятницу. Сколько строк кода можно вешать на одного программиста, понятно что если проект хорошо написан то можно и миллион. Но есть же где то пре...
AlekseyK Kluchnikov
31
Карта сайта