184 похожих чатов

Ребята, всем привет! Возникла необходимость завести словарь или иную сущность

куда из БД будут выгружаться ид пользователей и их метки (в бд многие ко многим). Вижу несколько вариантов реализации, как из них более предпочтителен и производителен?

Задача: Как настроить структуру данных в ClickHouse для хранения информации ид - (много ид)?

Варианты реализации:

1. Таблица с массивом: Создать таблицу с двумя столбцами: user_id и label_ids, где label_ids будет представлять собой массив идентификаторов меток пользователя.

2. Словарь и таблица связей: Использовать таблицу словаря для хранения меток и отдельную таблицу связей для связывания пользователей с их метками.

3. Движок Log: Создать таблицу связей с массивами меток с использованием движка Log.

4. Или что-то в духе

CREATE MATERIALIZED VIEW partner_labels_array AS
SELECT
user_id,
arrayJoin(arrayMap(x -> toString(x), groupArray(label_id))) AS label_ids
FROM user_labels
GROUP BY user_id;

Поделитесь опытом, кейсами, пж )

7 ответов

14 просмотров

выглядит будто вы используете materialized view как в постгре. По факту materialized view является тригером для записи в конечную таблицу. А зачем вам массивы в подобной таблице? Если многу ОЗУ и таблица не 10гб весит - используйте словари. если что-то большое - обычный mergetree с двумя колонками без группировки.

что дальше то с этой таблицей делать будете?

ein- Автор вопроса
Slach [altinity]
что дальше то с этой таблицей делать будете?

Использовать в роли фильтра в выборке. Мол дай всю стату за Н времени с такими-то то условиями и только тех юзеров у кого есть эта метка

ein- Автор вопроса
ein
Десятки тысяч

источник данных какой при этом? какая то стороняя SQL БД ?

Похожие вопросы

Обсуждают сегодня

Какой-то там пердун в 90-х решил, что есть какая-то разная типизация. Кого вообще это волнует?
КТ315
49
void terminal_scroll() { memmove(terminal_buffer, terminal_buffer + VGA_WIDTH, buffer_size - VGA_WIDTH); memset(terminal_buffer + buffer_size - VGA_WIDTH, 0, VGA_WIDTH); ...
Егор
47
Всем привет! Подскажите, пожалуйста, в чем ошибка? Настраиваю подключение к MySQL. Либы лежат рядом с exe. Все как по "учебнику"
Евгений
16
А можете как-то проверить меня по знаниям по ассемблеру?
A A
132
Здравствуйте! У меня появилась возможность купить книгу "Изучай Haskell во имя добра!". Но я где-то слышал, что эта книга устарела. Насколько это правда??
E
22
Здравствуйте! Я вот на stepic решаю задачи на хаскеле https://stepik.org/lesson/8443/step/8?unit=1578 мой код import Data.List (isInfixOf) removing :: String -> [String] ->...
E
10
Камрады, кто тесно работал с vtv, хотел уточнить. Ширина column задаётся жёстко на этапе создания дерева или можно в рантайме ее менять программно (не мышкой)?
Ed Doc
10
да ладно ... что там неочевидного ? глянуть в исх-ки датасета и/или кверика чтобы понять в каком месте и как выполняется обращения к св-вам blablaSQL - минутное дело, даже е...
Сергей
7
Здесь для arm кто-нибудь кодит ?
Nothing
52
Всем привет, у меня есть сервер принимающий входящие HTTP подключения, как проверить, что подключение было через прокси или нет, есть какие то поля в заголовках по которым мо...
Кибер Бомж
8
Карта сайта