Всем привет. начал получать алерты по etcd вида: message: etcd cluster

Question

Всем привет. начал получать алерты по etcd вида: message: etcd cluster

"kube-etcd": 100% of requests for Watch failed on etcd instance
В логах идет постоянный перевыбор лидера у etcd, а на одной из нод у кубелета в логах такое:
panic: runtime error: invalid memory address or nil pointer dereference

При это статус etcd кластера ок, RAFT INDEX увеличивается. Что это может быть?

#devops #kubernetes #programming #russian

0

27.10.2021

11 ответов

54 просмотра

someone Автор вопроса

Dmitry Sergeev 🇺🇦
все ли норм с сетью между etcd нодами?

да

0

27.10.2021

someone Автор вопроса

Dmitry Sergeev 🇺🇦
все ли норм с сетью между etcd нодами?

такая проблема только изза сети может быть?

0

27.10.2021

Dmitry Sergeev 🇺🇦

someone
такая проблема только изза сети может быть?

ну если у вас постоянные перевыборы лидера, то видимо лидер не сообщает о своем лидерстве периодически, то есть heartbeat пакетики не доледают до ведомых

0

27.10.2021

someone Автор вопроса

Dmitry Sergeev 🇺🇦
ну если у вас постоянные перевыборы лидера, то вид...

ну этьо физическая сеть а не плагин cni ?

0

27.10.2021

Dmitry Sergeev 🇺🇦

someone
ну этьо физическая сеть а не плагин cni ?

у вас etcd ноды по какой сети общаются между собой?

0

27.10.2021