Господа из корпоративного сектора, а что вы думаете о больших

Question

Господа из корпоративного сектора, а что вы думаете о больших

облачных логах? Те, которые "терабайт за пару дней". Имеют ли они право на жизнь, или следует форсировать правило "не храните ничего важного в логах, т.к. они стираются по первому чиху"?

#devops #programming #russian

0

13.05.2021

9 ответов

26 просмотров

Maksim Litvinov Автор вопроса

Vasiliy Romaneev
зависит от того - что у тебя в логах есть у тебя "...

скорее второе. А что значит "нормальный APM"?

0

13.05.2021

Vasiliy Romaneev

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

- ну у кого бабло есть - dynatrace берут (есть и другие годные решения) - у кого оплаченный эластик - начинают продавать эластик APM - кому-то и jaeger заходит. Кстати, весьма неплохая штука.

0

13.05.2021

Vasiliy Romaneev

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

нормальный APM - это application perfomance monitoring когда мы хотим померять - какие операции тормозят.

0

13.05.2021

Vasiliy Romaneev

Maksim Litvinov
скорее второе. А что значит "нормальный APM"?

если говорить про "логи, как инструмент дебага" - ну бывает надо. но и хранить их больше недели - как-то не очень и нужно.

0

13.05.2021

Maksim Litvinov Автор вопроса

Vasiliy Romaneev
нормальный APM - это application perfomance monito...

а, нет. Скорее логи для разбора полётов, когда обнаруживаются косяки с различными интеграциями. И которые приходят через две недели после случившегося.

0

13.05.2021

Vasiliy Romaneev

Maksim Litvinov
а, нет. Скорее логи для разбора полётов, когда обн...

еще раз в ru_logs направлю мой совет: 1. продумай реальную историю - как ты искать будешь. может тебе и грепа хватит. 2. Определись с размером логов 0.5Тб в сутки за 2 недели даст 7 Тб логов. диски должны быть шустры, а терпения должно хватить на время ответа. 3. Подумай - как сократить количество логов - "важное/бизнес" можно в один кластер логов, а "просто логи" и в другой. еще, если ты реально хочешь держать 7 Тб логов - глянь еще в сторону спланка (в РФ не продают)

0

13.05.2021

Maksim Litvinov Автор вопроса

Vasiliy Romaneev
еще раз в ru_logs направлю мой совет: 1. продума...

Лично я не хочу хранить, т.к. некоторые команды господ погромистов туда пишут всё что угодно, полезной информации там меньше процента. Вот и возник вопрос "а туда ли мы копаем". Datadog и CloudWatch предоставят объёмы без проблем, только это тупо и дорого. Ну и малоэффективно — копаться в больших объёмах.

0

13.05.2021

Vasiliy Romaneev

Maksim Litvinov
Лично я не хочу хранить, т.к. некоторые команды го...

решение очень простое - дать командам ценник. а там PO конкретной команды посмотрит на него и решит - нужны ли ему логи за такую цену.

0

13.05.2021

Vasiliy Romaneev · Accepted Answer

Vasiliy Romaneev

зависит от того - что у тебя в логах есть у тебя "логи, как метрики" - не храни их делай сразу метрики если у тебя "логи, как APM/дебаг" - не храни их - внедри нормальный APM если у тебя "логи, потому что регулятор требует" - храни и береги их.

0

13.05.2021

172 похожих чатов

Господа из корпоративного сектора, а что вы думаете о больших

9 ответов

Похожие вопросы