Подскажите. Есть такой promql: topk(5, sum by (resource) (increase(apiserver_request_total{cluster="dev"}[1h]))) Показывает какие ресурсы

Question

Подскажите. Есть такой promql: topk(5, sum by (resource) (increase(apiserver_request_total{cluster="dev"}[1h]))) Показывает какие ресурсы

обращаются к apiserver. Первое место leases, потом secret, потом configmap.
Как расширить диагности для снижения нагрузки к apiserver ?
То есть может это External Secrets Operator слишком часто обновляет ресурсы или это FluxCD слишком часто обновляет ресурсы, и это нагружает apiserver.

#devops #kubernetes #programming #russian

0

18.11.2023

9 ответов

32 просмотра

Anton Patsev Автор вопроса

George Gaál
Ты ресурсы смотришь, а хочешь по клиенту ?

да. или хотя бы что то приближенное к клиенту

0

18.11.2023

Dmitry Sergeev 🇺🇦

а по времени запроса пробовал смотреть? Например top 10 по разным перцентлям topk(10, histogram_quantile(0.90, sum(rate(apiserver_request_duration_seconds_bucket{verb!="WATCH"}[5m]))by(le,group,resource,verb)))

0

18.11.2023

Dmitry Sergeev 🇺🇦

вообще то что на первых местах по количеству запросов эти вещи вполне нормально

0

18.11.2023

Anton Patsev Автор вопроса

Dmitry Sergeev 🇺🇦
а по времени запроса пробовал смотреть? Например t...

интересно {group="apiextensions.k8s.io", resource="customresourcedefinitions", verb="LIST"} 0.91 {group="apiextensions.k8s.io", resource="customresourcedefinitions", verb="APPLY"} 0.904 {group="events.k8s.io", resource="events", verb="POST"} 0.8799999999999999 {group="batch", resource="jobs", verb="POST"} Спасибо. Возьму на заметку

0

18.11.2023

George Gaál

Anton Patsev
интересно {group="apiextensions.k8s.io", resource=...

Стикер

0

18.11.2023

Dmitry Sergeev 🇺🇦

Anton Patsev
интересно {group="apiextensions.k8s.io", resource=...

а очередей нет? workqueue_depth{job="apiserver"}

0

18.11.2023

Anton Patsev Автор вопроса

Dmitry Sergeev 🇺🇦
а очередей нет? workqueue_depth{job="apiserver"}

Стикер

0

18.11.2023

Dmitry Sergeev 🇺🇦

может еще пригодится аналогичное но для очередей перцентли topk(10, histogram_quantile(0.90, sum(rate(workqueue_queue_duration_seconds_bucket{job="apiserver"}[5m]))by(le,name))) Но у меня тоже там на первом месте crd_openapi_controller

0

18.11.2023

George Gaál · Accepted Answer

George Gaál

Ты ресурсы смотришь, а хочешь по клиенту ?

0

18.11.2023

172 похожих чатов

Подскажите. Есть такой promql: topk(5, sum by (resource) (increase(apiserver_request_total{cluster="dev"}[1h]))) Показывает какие ресурсы

9 ответов

Похожие вопросы