Привет! Вопрос про werf helm Приложение деплоится через werf helm upgrade

--atomic
Иногда(все условия для воспроизведения до конца непонятны, но есть версия, что это происходит когда джоба прерывается вручную) ловим вот такое состояние:

$ werf helm history my-app
REVISION UPDATED STATUS CHART APP VERSION DESCRIPTION
11 Tue Nov 5 18:16:18 2024 deployed my-chart-1.0.2 2024-11-05-b0b46ae2 Upgrade complete
12 Wed Nov 6 11:19:30 2024 failed my-chart-1.0.2 2024-11-06-588044f3 Upgrade "my-app" failed: error processing rollout phase stage: error tracking resources: deploy/my-app failed: po/my-app-58548d586-ksqd9 container/my-app: Unhealthy: Readiness probe failed: Get "http://10.11.12.13:4567/health/readiness": context deadline exceeded (Client.Timeout exceeded while awaiting headers)
13 Wed Nov 6 11:26:09 2024 pending-rollback my-chart-1.0.2 2024-11-05-b0b46ae2 Rollback to 11

Пока решаю ручным роллбэком

Вопрос - можно ли с этим что-то сделать?

2 ответов

21 просмотр

А что в app-58548d586-ksqd9 в этот момент происходило? Не выглядит как проблема helm или werf. Посмотрите логи и events от пода.

𝓐𝓵͢͢͢𝓮𝔁-C Автор вопроса
Vyacheslav
А что в app-58548d586-ksqd9 в этот момент происход...

Были проблемы связности с внешним сервисом, поэтому зафейлились readiness пробы и стриггерился откат. pending-rollback это ожидаемое состояние для такого сценария? Почему не failed, к примеру?

Похожие вопросы

Обсуждают сегодня

Всем привет. Понимаю, что, наверное, сто раз поднимали эту тему, но по ключевым словам не смог найти. Как передать в values.yaml зависимого хелм-чарта теги образов, собираемых...
Vitalik Petrov
4
Всем привет. Werf v2.10.5 При удалении релиза вместе с неймспейсом (werf dismiss --namespace namespace_name) Сыпятся ошибки ┌ Waiting for resources elimination: namespaces/rel...
Vitalik Petrov
1
@aigrychev, @ilya_lesikov добрый день! а поддерживает ли werf helm xxxx или werf bundle xxxx работу с сабчартами через http-прокси? (сработает ли использование HTTP_PROXY/HTTP...
Сергей Голод
4
Добрый день! Удалил все файлы с переменными из проекта, получил Error: release deploy: process resources: error validating adoptable resources: adoption validation failed: re...
Evgheni Mad
2
Всем привет. Сегодня добавили в приложение дополнительный образ nginx, в который докидывается системная статика прям в образ. При деплое бандлами деплоилось 200+ джоб(клиентов...
Владимир Муковоз
6
Добрый день, после перехода с версии 1.2 на 2.10 werf cleanup начал удалять использующиеся теги, и до и после обновления использовались дефолтные политики keepPolicies Подскаж...
Дмитрий
29
Блин а мне как поумнеть ?
Toxin
191
Друзья, добрый день. Прошу подсказать с базовым вопросом по использованию CI переменных gitlab в werf.yaml. Хочу в beforeInstall использовать env переменную с токеном. Мне нуж...
Anton Zol
10
Вопросик не совсем werf. Но вдруг мы подскажите воркэраунд или ещё что-нибудь. Могу ли я как-нибудь в моменте деплоя внутри heml рендера получить хэшсумму файла шаблона (./tem...
Alex Подрябинкин
11
Вопрос. Имеем большие репозитории и медленные скорости. Из-за чего очень долго длятся пайплайны. Azure DevOps, PR пайплан, выкачиваем только эфимерный(виртуальный) комит, и з...
Alex Подрябинкин
11
Карта сайта