184 похожих чатов

Привет. Кто-нибудь может помочь с советом в следующей ситуации? Есть таблица

MergeTree meter_values_buffer, где один из индекс - числовой StationId
Есть отдельно БД Postgres, где есть соответствие строкового identity к этому StationId. Набор пар StationId->identity небольшой. Оба значения в БД уникальны, так что можно identity->StationId сделать, если надо

Сейчас есть выборка из таблицы meter_values_buffer, куда в WHERE входит StationId, данные забираются из Clickhouse молниеносно
Задача: заменить StationId на identity в WHERE, не теряя в производительности, чтобы можно было фильтровать сущности по identity

Я создал flat() dictionary с названием station_identities из данных Postgres, который хранит StationId -> identity. Попробовал сделать meter_values_buffer RIGHT JOIN id_map по StationId, но WHERE отрабатывает фантастически медленно, даже если делать WHERE по StationId

Запросы: https://pastebin.com/FEL25L7F

Куда можно копнуть для того, чтобы в WHERE заменить StationId на identity без добавления отдельного столбца с ним?

4 ответов

17 просмотров

не надо делать join со словарями. Только dictGet. https://pastebin.com -- дохера рекламы, прямо елка новогодняя pastila.nl -- нету рекламы https://fiddle.clickhouse.com/ -- нету рекламы

чувствую что можно запилить типа where .... = dictGet ....

Mikhail-Kladkevich Автор вопроса
Denny [Altinity]
не надо делать join со словарями. Только dictGet. ...

О, поковырялся, вот так вот получилось и работает очень быстро, в том числе выдаётся доступ только к записям, у которых есть StationId в словаре: CREATE VIEW v_tst AS SELECT Time, Value, LocationType, FieldType, UnitId, StationId, dictGetOrNull('station_identities', 'StationIdentity', StationId) as StationIdentity FROM meter_values_buffer WHERE dictHas('station_identities', StationId);

Mikhail-Kladkevich Автор вопроса
Denny [Altinity]
чувствую что можно запилить типа where .... = dict...

И прям StationIdentity можно потом использовать в SELECT над v_tst

Похожие вопросы

Обсуждают сегодня

Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
Чтобы перехватить все нажимания буков на форме, надо хук ставить? Пробовал на форме ОнКейДаун, оно ловит клаву если фокус не на компоненте с вводом текста
Serjone
15
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
Всем привет! вывожу на общей стр дочерние ресурсыв каждом ресурсе галерея, и первая фотка должна выводиться на общей [!DocLister? &prepare=photo !]
Alekso
12
А можно вопрос? Мне сегодня сказали что у меня функция (которая просто заполняет массив значениями) не правильная void Full(double * arr, int n) { for (int i = 0; i < n; i...
† C E †
7
День добрый, подскажите пожалуйста, есть ли какой-то способ сказать ребару не компилировать определённое приложение? Всю доку их перечиатл ничего подобного не нашёл
Кирилл
14
Добрый вечер. Хочу чтобы у меня в классе поле было функцией, которая возвращает строку. Делаю так: interface ... TGetOutPath = function : String of object; ... protec...
Kirill Filippenok
12
Народ! Впервые клиенту пришло письмо от РКН, у вас, дескать, есть яндекс метрика, а нигде не написано, что вы ее юзаете. Никто не сталкивался?
Sasha Beep
14
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Здравствуйте, хочу сделать HelloWorld в консоли Дельфи, но функция API ничего не выводит, что я делаю не так? program Hello; {$APPTYPE CONSOLE} uses System.SysUtils, WinAPI.Wi...
Sergey Vinogradov
20
Карта сайта