184 похожих чатов

Приветствую, господа! Есть задача по логгированию http запросов (запрос + ответ).

Коллеги предложили использовать фичу с rabbitmq, чтобы clickhouse сам забирал данные. Но нюанс состоит в том, что хотелось бы рационально реализовать через Buffer движок и мержить данные раз в основную таблицу 1 раз каждые 100-200 запросов, чтобы избежать разовые вставки. Есть ли механизм, чтобы из rabbitmq данные отправлялись в таблицу с buffer движком или стоит писать отдельный сервис ?

2 ответов

5 просмотров

engine rabbit не пишет по одной записи, он накопит батч и вставит, нет смысла вставлять в buffer. Хотя никто вам не мешает создать mat view которая будет писать из rabbit в buffer

Илья 🐸- Автор вопроса
Konstantin Ilchenko
engine rabbit не пишет по одной записи, он накопит...

Хмм, довольно неплохо! Как я понимаю, это как раз пример из ссылки с якорем https://clickhouse.com/docs/en/engines/table-engines/integrations/rabbitmq

Похожие вопросы

Обсуждают сегодня

Anyone here suffers from unexplained aural migraines, who would be up for talking for a bit? Doesn't *have* to be aural, but I am not asking about headaches, I mean actual mi...
Martin Rys
55
подскажите пожалуйста, как мне освободить результат записанный в переменную result? в чем проблема подскажите если МОЖЕТЕ?
Михаил Helper
28
есть тут кто-то , кто только начал изучать си? если проходите курс на степике или как-то сами изучаете, пишите, может, скооперируемся?..
Eule
25
Слушайте, ещё такая интересная задачка. Сделан аудит действий пользователей через триггеры в базе, соответственно каждый пользователь имеет свой логин и пароль в базе. Это пре...
Сергей Бычков
12
Скажите, тут нет проблемы? IMyInterface1 = interface function GetInterface2: IInterface2; ... function TMyInterface.GetInterface2: IInterface2; begin Result := TI...
Ruslan aka DUDE
18
вопрос по москвину - не понимаю вот такого вопроса похоже Сколько разных всегда завершающихся функций с типом a -> a -> b -> a -> a можно реализовать? Две функции одинаково...
Fedor
11
Кстати, раз про скачивание файлов разговор зашел) Сделал бота для себя (транскрибирующего и суммаризирующего встречи) но не ожидал что за 2 месяца 10к пользователей набежит😅...
Andrey Obolenskiy
8
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
Утра доброго. Просветите пожалуйста. Хочу сделать rest сервер на делфи. Посмотрел 3 фреймворка: dmvc, Mars, mormot. Ни в одном из них не упоминается ассинхронная обработка вхо...
Сергей Бычков
10
Как попросить stack install делать executable без .exe на винде?
Danila Danko
9
Карта сайта