172 похожих чатов

Всем привет, кто-то сталкивался с такой проблемой? level=error msg="Handler for

GET /system/df returned error: context canceled"
level=error msg="Handler for GET /images/json returned error: write unix /run/docker.sock->@: write: broken pipe"
http: superfluous response.WriteHeader call from github.com/docker/docker/api/server/httputils.WriteJSON (httputils_write_json.go:11)
level=error msg="Handler for GET /system/df returned error: context canceled"
На сервере 8 контейнеров, мониторится заббикс агентом 2, в 1:20 было оповещение что сервис докера упал, что по факту не так, перезапусков не было, насколько я понял проблема в таймаутах, дал запрос ждёт 60 сек, если ответа нет, то далее ошибка, в ручном режиме через заббикс все метрики и данные получаю(вычитал рекомендации об отключении итемов в забексе шаблоне докера что мне кажется такая себе затея), ошибка бывает периодически, не могу понять в чём именно проблема, дайте совет пожалуйста

29 ответов

97 просмотров

Они наверное предлагали отключить все связанное с images,но не с контейнерами. Почему бы нет, ради эксперимента?

И почему явная проблема с производительностью обсуждается без упоминания и описания метрик нагрузки?

Pasha-Shredder Автор вопроса
Pasha-Shredder Автор вопроса
Pavel Zheltouhov
И почему явная проблема с производительностью обсу...

просто для меня это не явный аспект) по этому и пришёл за советом)

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
И почему явная проблема с производительностью обсу...

другими словами увеличение ресурсов сервера может решить проблему?

Pasha Shredder
просто для меня это не явный аспект) по этому и пр...

Ну как не явный? Что более вероятно, что в docker сохраняется незамеченная проблема с сокетами или что ваша конкретная машина нагружена?

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Ну как не явный? Что более вероятно, что в docker ...

звучит логично , но то что это произошло ночью, когда нагрузки обычно нет, а днём такого не наблюдается, в течении месяца это второй раз подобного рода ошибка, просто из того что пишут на форумах, я для себя так и не смог понять, проблема это докера, возможно нужно обновиться, или ресурсов

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Ну как не явный? Что более вероятно, что в docker ...

если не затруднит, можно парой слов описать что именно значат эти ошибки?

Pasha Shredder
если не затруднит, можно парой слов описать что им...

Я предполагаю, что опрос метрик просто не успел. И так несколько раз. Раз есть zabbix, данных чтобы проверить это, должно быть достаточно

Pasha Shredder
если не затруднит, можно парой слов описать что им...

Хотя, другие триггеры в zabbix не сработали?

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Хотя, другие триггеры в zabbix не сработали?

только 1 что сервис упал, что по факту не так, я думал мб сетевые проблемы просто в работоспособности приложения , контейнеров и самого сервера не были замечены, ну то есть их не было в принципе

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Хотя, другие триггеры в zabbix не сработали?

не уверен, но был скачок по дашбордам в заббиксе docker goroutines , насколько я понимаю он отвечает и за запросы и сеть ? и по времени ошибки совпадает

Pasha Shredder
не уверен, но был скачок по дашбордам в заббиксе d...

это рассуждения о триггерах. Но ведь есть просто метрики не превысившие пороги. Они тоже информативны.

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
это рассуждения о триггерах. Но ведь есть просто м...

остальные метрики в норме, а горутина свыше нормы был скачок

Pasha Shredder
не уверен, но был скачок по дашбордам в заббиксе d...

вот это - хз. факт в том, что мониторщики почему-то считают этот показатель важным.

Pasha-Shredder Автор вопроса

вот и я об этом же, если на сервере нет явных ошибок, но триггер сработал, и по дашбордам видно прыжок , то вероятно она важна, и нужно разобраться

Имхо, горутины - бесконечные. Непонятно зачем их заббикс собирает и даже на дашборд выводит.

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Имхо, горутины - бесконечные. Непонятно зачем их з...

просто другого логического объяснения этому я не вижу, пока что, и пока это выглядит основным источником проблемы, мб действительно нужно обновить докер, он до меня на проекте ставился, мб 1.5-2 года назад

Pasha Shredder
вот и я об этом же, если на сервере нет явных ошиб...

Я думаю пора забить на это. Может хранилка смигрировала, может еще что. Вас объяснительную на каждую ошибку продолжительностью минуту заставляют писать?

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
Я думаю пора забить на это. Может хранилка смигри...

эмм) есть такое, "почему ошибка"? "как будешь устранять что бы не появлялась вновь"? и тд)

Pasha Shredder
эмм) есть такое, "почему ошибка"? "как будешь устр...

ну выгрузите все-все метрики и эксельку отошлите. и прикрепите методичку по факторному анализу.

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
ну выгрузите все-все метрики и эксельку отошлите. ...

клиент непростой просто) в любом случае благодарю за коммуникацию и советы)

Pasha Shredder
остальные метрики в норме, а горутина свыше нормы ...

возможно, следы какого-то процесса остались в логах самого докера

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
возможно, следы какого-то процесса остались в лога...

всё штатно работает, вот сейчас опять так же ошибка но без алерта...по журналу что вижу, и в дашборе тоже скачок на горутине

Pasha Shredder
всё штатно работает, вот сейчас опять так же ошибк...

так понятно что штатно, но есть ли сообщения регулярно близкие по времени с этими проблемами?

Pasha-Shredder Автор вопроса

во время деплоя был скачок, в дженкинсе запустили пайплайн, 40 минут назад, и во время был скачок

Pasha Shredder
во время деплоя был скачок, в дженкинсе запустили ...

да нет там прямого лимита на горутины. это просто было бы глупо. они "бесплатные". есть еще какой-то лимит или ресурс. А число горутин собирается просто потому что это легко собрать и они могут свидетельствовать о числе каких-то изменений в docker.

Pasha-Shredder Автор вопроса
Pavel Zheltouhov
да нет там прямого лимита на горутины. это просто ...

может вы и правы за ресурсы, странно что ночью был скачок по загрузке системы и СПУ и большой скачок по сетевому трафику

Похожие вопросы

Обсуждают сегодня

а зачем этот вопрос для удаления из чата?
Mёdkinson Medvezhkin
63
Всем привет! Подскажите. Я написал приложение на Delphi 10.2 Tokyo под Windows 10. И передо мной стал вопрос о том чтобы сделать это приложение кроссплатформенным (под Linux и...
Дмитрий Завгородний
24
Почему стало ломаться на D11? "739002.86400000' is not a valid timestamp" function IncDateTime(aStamp:TTimeStamp;aKind:TTriggerKind;aInterval:Integer):TDateTime; //aStamp = 2...
Катерина Свиридова
8
Привет всем. Подскажите где можно посмотреть, какая версия электрон, поддерживает версии windows? Некий changelog. Мне бы желательно, поддержку 7,8,10... latest, как понимаю и...
Anonym Squad
21
Портфолио: Зовут меня Александр, мне 36 лет. Город Пушкино. Общий рабочий стаж: ~14 лет Уровень квалификации: Senior Full-stack developer Где прочесть мой код? https://github....
Magic
10
Есть ли смысл устраиваться на 1с ? Даст это плюс в дальнейшем трудоустройстве на php? Просто у меня в городе вакансий на пхп нету. Или лучше удаленно искать. Опыта работы нету...
Azamat
14
а где есть mysql cloud кроме яндекс-клауд?
Oleg Nosov
13
hi im a cs student. i need some advice from people who have enough experience in Embedded Software. I need to know whether this profession is suitable for me. I have watched s...
Sahand 🏔️
8
Не ну фпц - это уже просто троллинг какой-то. Элементарный код нельзя собрать. ЧЯДНТ? program Project1; {$mode delphi} uses SysUtils, Classes, Generics.Collections; var...
Peter
4
вот что получается в интерпрететоре, работает и результаты выгляд разумными, но то как выглядит код мне не нравиться, а понять куда двигаться не очень могу, если кому не лень ...
Fedor
42
Карта сайта