172 похожих чатов

Господа из корпоративного сектора, а что вы думаете о больших

облачных логах? Те, которые "терабайт за пару дней". Имеют ли они право на жизнь, или следует форсировать правило "не храните ничего важного в логах, т.к. они стираются по первому чиху"?

9 ответов

18 просмотров

зависит от того - что у тебя в логах есть у тебя "логи, как метрики" - не храни их делай сразу метрики если у тебя "логи, как APM/дебаг" - не храни их - внедри нормальный APM если у тебя "логи, потому что регулятор требует" - храни и береги их.

Maksim-Litvinov Автор вопроса
Vasiliy Romaneev
зависит от того - что у тебя в логах есть у тебя "...

скорее второе. А что значит "нормальный APM"?

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

- ну у кого бабло есть - dynatrace берут (есть и другие годные решения) - у кого оплаченный эластик - начинают продавать эластик APM - кому-то и jaeger заходит. Кстати, весьма неплохая штука.

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

нормальный APM - это application perfomance monitoring когда мы хотим померять - какие операции тормозят.

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

если говорить про "логи, как инструмент дебага" - ну бывает надо. но и хранить их больше недели - как-то не очень и нужно.

Maksim-Litvinov Автор вопроса
Vasiliy Romaneev
нормальный APM - это application perfomance monito...

а, нет. Скорее логи для разбора полётов, когда обнаруживаются косяки с различными интеграциями. И которые приходят через две недели после случившегося.

Maksim Litvinov
а, нет. Скорее логи для разбора полётов, когда обн...

еще раз в ru_logs направлю мой совет: 1. продумай реальную историю - как ты искать будешь. может тебе и грепа хватит. 2. Определись с размером логов 0.5Тб в сутки за 2 недели даст 7 Тб логов. диски должны быть шустры, а терпения должно хватить на время ответа. 3. Подумай - как сократить количество логов - "важное/бизнес" можно в один кластер логов, а "просто логи" и в другой. еще, если ты реально хочешь держать 7 Тб логов - глянь еще в сторону спланка (в РФ не продают)

Maksim-Litvinov Автор вопроса
Vasiliy Romaneev
еще раз в ru_logs направлю мой совет: 1. продума...

Лично я не хочу хранить, т.к. некоторые команды господ погромистов туда пишут всё что угодно, полезной информации там меньше процента. Вот и возник вопрос "а туда ли мы копаем". Datadog и CloudWatch предоставят объёмы без проблем, только это тупо и дорого. Ну и малоэффективно — копаться в больших объёмах.

Maksim Litvinov
Лично я не хочу хранить, т.к. некоторые команды го...

решение очень простое - дать командам ценник. а там PO конкретной команды посмотрит на него и решит - нужны ли ему логи за такую цену.

Похожие вопросы

Обсуждают сегодня

Интересно, нет ли какого-то способа получить из dll не адрес самой метки, а адрес со смещением?
The Bird of Hermes
54
generic procedure function test<T>(param: T); type case T of longint: NewT = word; longword: NewT = byte; end; var v1: NewT; Как это можно сделать? Чтобы у меня...
notme
21
Делал задачу вот такую https://stepik.org/lesson/4985/step/9?unit=1083 получилось такое https://play.haskell.org/saved/ipKrepqe оно работает, тестов много не писал, но работае...
Fedor
22
Всем привет, все время юзал бандлы, но появилась задача по базовому образу и команда werf build не пушит образ werf build --config='./root/werf.yaml' --repo ${CI_REGISTRY_IMAG...
Илья Корж
4
Хотел уточнить: копирование из одного рекорда в другой однотипный рекорд можно только по полям отдельно или можно чохом, типа Assign?
Ed Doc
9
Похоже опять туплю задача https://stepik.org/lesson/5431/step/8?unit=1132 код и его работа https://play.haskell.org/saved/lmYTShXM на мой взгляд все правильно, и даже избыто...
Fedor
8
Всем привет, подскажите, пожалуйста, сколько живет connection к рэббиту, могу ли я использовать один инстанс подключения? Если да, то считается ли это хорошей практикой? Вот п...
Sergey
3
Sometimes I like to solve problems the hard way. What do I mean? You know many problems can be fixed by restarting the system, but how much do you learn about the system? P...
Matthias Hoffmann
1
что-то я не понимаю, в линуксе отладочную информацию как убрать из бинаря? он что с этой опцией, что без - одного и того же (достаточно большого) размера (да, я про лазарь)
Iluha Companets
13
Anyone here suffers from unexplained aural migraines, who would be up for talking for a bit? Doesn't *have* to be aural, but I am not asking about headaches, I mean actual mi...
Martin Rys
58
Карта сайта