Коллеги, позвольте ворваться сразу с вопроса.. уж больно проблема достала. Имеется

виртуальный хост, на котором есть сразу и жирка и конфля. С недавних пор (2-3 месяца) ровно раз в неделю примерно в один и тот же промежуток времени мониторинг сообщает о недоступности инстансов. Изучение логов мониторинга показывает, что на хосте что-то выжирает весь процессор, от чего отваливается сеть. Потом все спокойно само собой восстанавливается и инстансы становятся доступны (т.е. они не падают, перезапускать руками их не надо).
Смотрели журналы шедулеров и в жирке и в конфле - никаких джобов на время падения не висит. На самом хосте в кронтабе тоже ничего лишнего нет. Отловить какой именно процесс утекает пока не получилось - ставим запись top'а в файл на определенный промежуток, так эта зараза падает после. Т.Е. в рамках некоторого промежутка времени проблема еще и гуляющая.
Может кто сталкивался или имеет представление куда копать? Пока исходя из того, что это все-таки или жирка или конфлю грузит проц. Возможно, это что-то еще (я вот лично думаю может снапшоты с виртуалки снимаются в это время или она мигрирует между хостами в кластере, но это вилами по воде, а проверить пока не получилось), но пока хочется исключить продукты атлассиан, чтобы спокойно дальше мучать инфраструктуру.

3 ответов

16 просмотров

Структура есть на джире?

Надо поставить apm на обе системы glowroot, например

Похожие вопросы

Обсуждают сегодня

Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Вот еще странный косяк, подскажите как бороться. Я git clone сделал себе всего embassy и примеры там запускаю. Всё хорошо. Но вот решил в cargo.toml зависимости не как в приме...
Lukutin R2AJP
1
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Раз начали говорить про embassy, то присоединюсь со своими парой вопросов. 1) Есть ли сопоставимые аналоги для асинхронного кода в emdebbed? 2) Можно ли внутри задач embassy ...
NI_isx
6
Всем привет, нужна как никогда, нужна помощь с IO в загрузчике. Пишу в code16 после установки сегментных регистров, пишу вывод символа. Пробовал 2 варианта: # 1 mov $0x0E, %a...
Shadow Akira
14
Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Коллеги, я тут для личных нужд пошел ставить MQTT сервер, пощупал mosquitto, но ужаснулся отсутствию такой банальности, как HTTP API для посмотреть список топиков. А тут что,...
Maksim Lapshin
14
У меня задача: написать брокер сообщений. Очереди и потребители. Очереди поддерживают приоритеты. Очередь отдает сообщения, только обработчикам с соответствующими характеристи...
Aleksandr Filippov
2
Карта сайта