172 похожих чатов

Народ всем привет, есть тестовый кластер Ubuntu 18.04 для разработки

под minikube —driver=none
kubelet как systemd сервис, все остальное как контейнеры в docker которые ставятся через kubeadm

работает какое то время несколько часов, потом перестает
100% CPU жрет apiserver, kubelet и load average под 1000

и все остальные компоненты тоже жрать начинают
памяти хватает, диска тоже

kubectl сокет apiserver не видит
docker logs
тоже тормозит
помогает только minikube stop
где бы посмотреть логи kubernetes после того как кластер выключили?

journalctl -xen --no-pager -u kubelet
показывает

k8s.io/client-go/informers/factory.go:133: Failed to list *v1beta1.CSIDriver: Get https://control-plane.minikube.internal:8443/apis/storage.k8s.io/v1beta1/csidrivers?limit=500&resourceVersion=0: dial tcp 10.0.2.15:8443: i/o timeout

failed to ensure node lease exists, will retry in 1.6s, error: Get https://control-plane.minikube.internal:8443/apis/coordination.k8s.io/v1beta1/namespaces/kube-node-lease/leases/local-altinity-clickhouse-operator?timeout=10s: net/http: request canceled while waiting for connection (Client.Timeout exceeded while awaiting headers)

что понятно, потому что apiserver сходит с ума...
вопрос, какого фига? кто его начинает так ддосить...

пытаюсь смотреть логи через
docker ps -a | grep apiserver

вижу два контейнера, один вышел час назад
второй вышел 40 минут назад
смотрю тот что постарше
вижу в логах apiserver какую то странную ерунду
E0521 02:51:54.616872 1 repair.go:74] unable to refresh the port block: Get https://[::1]:8443/api/v1/services: dial tcp [::1]:8443: connect: connection refused
````
это как?
рядом вот такое
I0521 02:51:54.590518 1 trace.go:81] Trace[1160183169]: "Reflector storage/cacher.go:/apiregistration.k8s.io/apiservices ListAndWatch" (started: 2020-05-21 02:51:26.034765863 +0000 UTC m=+1495.259645577) (total time: 28.555691294s):
Trace[1160183169]: [28.553834444s] [28.553834444s] Objects listed

I0521 02:51:55.068425 1 trace.go:81] Trace[239533413]: "GuaranteedUpdate etcd3: *v1.Endpoints" (started: 2020-05-21 02:50:07.433524314 +0000 UTC m=+1416.658404162) (total time: 1m47.634833453s):
Trace[239533413]: [1m45.055787461s] [1m45.053639801s] Transaction prepared
Trace[239533413]: [1m47.633499606s] [2.577712145s] Transaction committed
E0521 02:51:55.096912 1 controller.go:218] unable to sync kubernetes service: Get https://[::1]:8443/api/v1/namespaces/default/endpoints/kubernetes: dial tcp [::1]:8443: connect: connection refused
E0521 02:51:55.106869 1 controller.go:179] Get https://[::1]:8443/api/v1/namespaces/default/endpoints/kubernetes: dial tcp [::1]:8443: connect: connection refused
```

как запущенный apiserver может не мочь коннектиться сам на себя?

1 ответов

4 просмотра

могу порекомендовать только миникуб не юзать 😮

Похожие вопросы

Обсуждают сегодня

А еще в перле можно уже @arr1 + @arr2?
Sergei Zhmylove
53
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
Подскажите, где смотреть результат выполнения программы? Код: ;.686 ;Система команд процессора 686 ;.MODEL FLAT,stdcall ;Модель памяти плоская, станда...
Егор Анелькин
5
Привет всем. появился вопрос. Разрабатываю сайт, в данный момент он запущен. Хостинг beget. Добавляю на сайт яндекс метрику с помощью полей client-settings (взято отсюда http...
Andrew
2
Добрый день подскажите пожалуйста может кто то сталкивался с ошибками Sentry 22.10.0 развернутым из helm чарт в Kubernetes? Изначально 3 дня назад очень стало много событий ух...
Tire4 Finist Devops
1
;.686 ;Система команд процессора 686 ;.MODEL FLAT,stdcall ;Модель памяти плоская, стандартный ;вызов процедуры ;option casemap:no...
Егор Анелькин
1
почому оно не работает?
Vi Chapmann Chapmann
19
Так а кто может спарсить всех участников чата? Идишники
Magic
18
а как ловят такое ghci> res <- getPos2 urlt 0 (alist !! 0) 200 ghci> res SearchAtom (Search "www.google.com" "/search?q=" "Haskell") "haskell.org" (SearchTS [(2024-05-06 07:...
Fedor
14
Есть вопрос: допустим есть железка с каким-то интерфейсом(допустим usb), но как по этому интерфейсу железкой управлять неизвестно, прог нету, а управлять очень хочется надо. К...
Mixail Frolov
15
Карта сайта