172 похожих чатов

Народ всем привет, есть тестовый кластер Ubuntu 18.04 для разработки

под minikube —driver=none
kubelet как systemd сервис, все остальное как контейнеры в docker которые ставятся через kubeadm

работает какое то время несколько часов, потом перестает
100% CPU жрет apiserver, kubelet и load average под 1000

и все остальные компоненты тоже жрать начинают
памяти хватает, диска тоже

kubectl сокет apiserver не видит
docker logs
тоже тормозит
помогает только minikube stop
где бы посмотреть логи kubernetes после того как кластер выключили?

journalctl -xen --no-pager -u kubelet
показывает

k8s.io/client-go/informers/factory.go:133: Failed to list *v1beta1.CSIDriver: Get https://control-plane.minikube.internal:8443/apis/storage.k8s.io/v1beta1/csidrivers?limit=500&resourceVersion=0: dial tcp 10.0.2.15:8443: i/o timeout

failed to ensure node lease exists, will retry in 1.6s, error: Get https://control-plane.minikube.internal:8443/apis/coordination.k8s.io/v1beta1/namespaces/kube-node-lease/leases/local-altinity-clickhouse-operator?timeout=10s: net/http: request canceled while waiting for connection (Client.Timeout exceeded while awaiting headers)

что понятно, потому что apiserver сходит с ума...
вопрос, какого фига? кто его начинает так ддосить...

пытаюсь смотреть логи через
docker ps -a | grep apiserver

вижу два контейнера, один вышел час назад
второй вышел 40 минут назад
смотрю тот что постарше
вижу в логах apiserver какую то странную ерунду
E0521 02:51:54.616872 1 repair.go:74] unable to refresh the port block: Get https://[::1]:8443/api/v1/services: dial tcp [::1]:8443: connect: connection refused
````
это как?
рядом вот такое
I0521 02:51:54.590518 1 trace.go:81] Trace[1160183169]: "Reflector storage/cacher.go:/apiregistration.k8s.io/apiservices ListAndWatch" (started: 2020-05-21 02:51:26.034765863 +0000 UTC m=+1495.259645577) (total time: 28.555691294s):
Trace[1160183169]: [28.553834444s] [28.553834444s] Objects listed

I0521 02:51:55.068425 1 trace.go:81] Trace[239533413]: "GuaranteedUpdate etcd3: *v1.Endpoints" (started: 2020-05-21 02:50:07.433524314 +0000 UTC m=+1416.658404162) (total time: 1m47.634833453s):
Trace[239533413]: [1m45.055787461s] [1m45.053639801s] Transaction prepared
Trace[239533413]: [1m47.633499606s] [2.577712145s] Transaction committed
E0521 02:51:55.096912 1 controller.go:218] unable to sync kubernetes service: Get https://[::1]:8443/api/v1/namespaces/default/endpoints/kubernetes: dial tcp [::1]:8443: connect: connection refused
E0521 02:51:55.106869 1 controller.go:179] Get https://[::1]:8443/api/v1/namespaces/default/endpoints/kubernetes: dial tcp [::1]:8443: connect: connection refused
```

как запущенный apiserver может не мочь коннектиться сам на себя?

1 ответов

31 просмотр

могу порекомендовать только миникуб не юзать 😮

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта