Юзаю managed кубер от digitalocean, последнее время воркер нода меняет

Question

Юзаю managed кубер от digitalocean, последнее время воркер нода меняет

статус в NotReady каждые ~24 часа. Поддержка "изучает проблему" уже 3 недели, пингую их, новости не сообщают. Кто то сталкивался?

k describe node
https://gist.github.com/nnqq/91f939efa94a92a3c6ba89b9a374739e

UPD: нода умирает из за тысяч chrome процессов, но без родительского, создаваемых pupetter, возможно из за того что после убийства по OOM сервис не вырубает пупеттер корректно и остаются фантомные процессы хрома

#devops #kubernetes #programming #russian

0

11.04.2021

6 ответов

4 просмотра

Denis Автор вопроса

Dmitry Sergeev 🇺🇦
а в евентах причины то какие пишет? Просто с kubel...

я отредактировал gist, копипастнул весь describe, из странного вот: Conditions: Ready False Sun, 11 Apr 2021 22:26:27 +0300 Sun, 11 Apr 2021 22:01:22 +0300 KubeletNotReady [container runtime is down, PLEG is not healthy: pleg was last seen active 25m35.233938732s ago; threshold is 3m0s] Events: Warning ContainerGCFailed 41s (x25 over 24m) kubelet, pool-dma3v2ly6-8fvqk rpc error: code = Unavailable desc = connection error: desc = "transport: Error while dialing dial unix /run/containerd/containerd.sock: connect: connection refused"

0

11.04.2021

Dmitry Sergeev 🇺🇦

Denis
я отредактировал gist, копипастнул весь describe, ...

В managed решениях, самый простой способ взять новую ноду и дропнуть эту. Печальное что-то там на ней происходит /run/containerd/containerd.sock: connect: connection refused

0

11.04.2021

Denis Автор вопроса

Dmitry Sergeev 🇺🇦
В managed решениях, самый простой способ взять нов...

решение с пересозданием ноды то работает, но руками это делать каждый день уже надоело

0

11.04.2021

Dmitry Sergeev 🇺🇦

Denis
решение с пересозданием ноды то работает, но рукам...

а там ноды же под вашим управлением? Может ресурсов не хватает так, что containerd отваливается? На ноду захоидили смотрели что там в целом по логам как себя чувствует?

0

11.04.2021

Denis Автор вопроса

Dmitry Sergeev 🇺🇦
а там ноды же под вашим управлением? Может ресурсо...

воркер да, мастер у них, у меня его даже в списке нет по панели никогда более 30% CPU и 40% оперативы не поднимается задеплоены хобби проекты с 1 rps

0

11.04.2021

Dmitry Sergeev 🇺🇦 · Accepted Answer

Dmitry Sergeev 🇺🇦

а в евентах причины то какие пишет? Просто с kubelet связь пропадает?

0

11.04.2021

172 похожих чатов

Юзаю managed кубер от digitalocean, последнее время воркер нода меняет

6 ответов

Похожие вопросы