171 похожих чатов

Есть пачка абстрактных сервисов, которые пишут логи. Логи хотим анализировать

и ловить всякие события. в дальнейшем искать аномалии итд итп. Допустим строим модель как выше благородные доны описывали: есть абстрактный ридер логов (файлбит как пример) и есть некий коллектор логов с задачей собрать архив (не привязываемся к технологии).
Вопрос 1: Правильно ли лить сырые логи без препроцессинга?
Вопрос 2: Как благородные доны избавляются от SPOF - демон коллектора умер, БД загнулась, сеть отвалилась, файловая система гипервизора разрушилась, пропало питание и другие 100500 версий чумы, которые могут произойти?
Вопрос 3: Почему именно такое решение было принято по п. 2? Этот вопрос на самом деле для меня самый главный.
Заранее всем спасибо, кто поделится своими решениями и особенно критериями, почему так сделали.

1 ответов

23 просмотра

1. лучше не сырые, а какой-нибудь json если есть возможность. Тогда пост обработка в минимуме. 2. здесь главное БД, чтобы не было SPOF делать кластер из нескольких нод.

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта