Ребята всем привет. Можно ли в кафке хранить данные примерно

месяц и не исчезнут ли они при перезагрузке или в каких то сбоях сервера ? Данные концентрации воздуха. Изначально думал kafka + clickhouse использовать. Cейчас строю архитектуру и надо отказаться от clickhouse из за боязни политических моментов, теперь продумываю kafka + postgre. Ежесекундно сохранять в постгре данные, идея плохая. Думал хранить в кафке каждые 20-30 минут и среднее значение записывать в базу, но пм хочет чтобы эти ежесекундные данные хотя бы на месяц оставались доступными на всякий случай

4 ответов

11 просмотров

Прости, а какие риски в кх? 3 брокера, rf 3, isr 2 или 3, ретеншн месяц в мс и никуда твои данные не денутся. Но это не снимает необходимости держать фоллбэк в файлы на случай недоступности кафки. Кейс странный, очень. Что за данные?

Bekzat- Автор вопроса
Eduard Generalov
Прости, а какие риски в кх? 3 брокера, rf 3, isr 2...

данные с датчиков воздуха на предприятии

Вы не думали о том, что это можно запихать в прометеус например?

Ivgenich
Вы не думали о том, что это можно запихать в проме...

Скорее в викторию, тк пуш модель и инсерт с маленьким сдвигом во времени (сетевые проблемы).

Похожие вопросы

Обсуждают сегодня

Я хочу запустить свой проект в тг. Что-то между пирамидой и майнилкой. Еще подобного ничего не было. Уникальная идея. Нужен именно не бот, а приложение. С ввод, выводом тон...
Павел А.
6
Всем доброго вечера! Хочу поделиться своим злоключением с человеком, который, как оказалось сюда тоже скидывал свое резюме. Жаль, что я вашу группу не нашел раньше… человек ки...
Роман Ахмедзянов
4
Привет, кто может сделать юзербота с апи? Задачи: - создавать группы - создавать каналы - задавать для созданных каналов аватарку или эмоджи, имя группы - добавлять в группы...
Lencore
11
господа, когда у вас в боте есть локализация (ру + англ, остальные языки пока не планируются), вы на первом старте как с языком решаете вопрос: смотрите на language_code приле...
Denis 🐍|👑 | darling! 🥰
5
Я колись ставив гуглу антиспам 3.0, може і норм, але мені не дуже зайшло. Теж думав тиждень, що його і куди. Зупинився на трех варіантах відразу всі три і включив 1. Перевір...
𝓔𝓾𝓰𝓮𝓷𝓮𝓥 J
2
Всем привет, Добавил в плагин определение user agent public function registerMarkupTags() { return [ 'filters' => [ 'staticPage' => ['RainLab\Pages\Cl...
John Norton Kruger
3
А чего при переходе с 2 на 3 все что в билдере сделано тютю?
Денис Александрович
5
Кому нибудь нужен плагин для генерации метатегов? А если нужен что бы вам хотелось в нем видеть?
Black Cat
3
Портфолио: Зовут меня Александр, мне 36 лет. Город Пушкино. Общий рабочий стаж: ~14 лет Уровень квалификации: Senior Full-stack developer Где прочесть мой код? https://github....
Magic
10
где собака, админ группы? нычкуется и боится проявить волю, в толерантность еще не наигрался? @yelizariev
Ognezar
61
Карта сайта