Кто-То настраивал кастомный лейбл, который можно использовать в LogQL(loki)? пробовал так:

Question

Кто-То настраивал кастомный лейбл, который можно использовать в LogQL(loki)? пробовал так:

- action: replace
source_labels:
- __meta_kubernetes_pod_label_ticket
target_label: ticket

у меня есть фиче поды, которые имеют лейбл ticket: TASK_NUMBER
и есть те что обычные, релизные ticket: none
в итоге в локи я вижу только ticket: none,а других value тупо нет
что я упускаю?

#devops #kubernetes #programming #russian

0

22.09.2023

11 ответов

19 просмотров

Stefan Автор вопроса

Aleksei Olshanskiy
А коллекторы правильно настроены?

ну promtail с таким конфигом, по сути дефолтный https://pastebin.com/Ce7dwymT

0

22.09.2023

Aleksei Olshanskiy

Stefan
ну promtail с таким конфигом, по сути дефолтный ht...

А поды все в одном ns обитают?

0

22.09.2023

Stefan Автор вопроса

Aleksei Olshanskiy
А поды все в одном ns обитают?

не, в разных всё

0

22.09.2023

Stefan Автор вопроса

Aleksei Olshanskiy
А поды все в одном ns обитают?

level=info ts=2023-09-22T09:07:47.733716656Z caller=filetargetmanager.go:361 msg="Adding target" key="/var/log/pods/*d5f97f10-f7b0-42e2-87ab-ad19f078d7b0/mysql/*.log:{app=\"back-crypto\", cluster=\"eks-dev-eu-central-1\", container=\"mysql\", job=\"back-crypto/back-crypto\", namespace=\"back-crypto\", node_name=\"ip-10-2-3-92.eu-central-1.compute.internal\", pod=\"back-crypto-ftr-9946d0802f-57c445b7c8-9q9lc\", ticket=\"CRYP-956\"}" даже вот в логах видно что promtail всё нашел и добавил в скрейп, но локи часть value куда-то теряет

0

22.09.2023

Aleksei Olshanskiy

Stefan
не, в разных всё

Проверь что не дропаются логи по неймспейсу, но я каких-то явных проблем в конфиге не вижу. Logql вообще этих подов не видит? Или только лейбл пропадает?

0

22.09.2023

Stefan Автор вопроса

Aleksei Olshanskiy
Проверь что не дропаются логи по неймспейсу, но я ...

видит только ticket: none(который есть тоже на подах) а ticket: CRYP-956 например не видит, того и не понимаю ЧЗХ, ладно бы ничего не видел, а так одно что-то забрал и всё тут level=info ts=2023-09-22T09:07:47.733070046Z caller=filetargetmanager.go:361 msg="Adding target" key="/var/log/pods/*101511c7-8f73-4f6f-9d16-f5616d2fc3b8/back-crypto/*.log:{app=\"back-crypto\", cluster=\"eks-dev-eu-central-1\", container=\"back-crypto\", job=\"back-crypto/back-crypto\", namespace=\"back-crypto\", node_name=\"ip-10-2-3-92.eu-central-1.compute.internal\", pod=\"back-crypto-64dc7bc5c-wzthp\", ticket=\"none\"}"

0

22.09.2023

Aleksei Olshanskiy

Stefan
видит только ticket: none(который есть тоже на под...

Не, я имею в виду если искать по pod: podname , те поды, которые с этим тикетом находятся?

0

22.09.2023

Stefan Автор вопроса

Aleksei Olshanskiy
Не, я имею в виду если искать по pod: podname , те...

да, есть

0

22.09.2023