- action: replace
source_labels:
- __meta_kubernetes_pod_label_ticket
target_label: ticket
у меня есть фиче поды, которые имеют лейбл ticket: TASK_NUMBER
и есть те что обычные, релизные ticket: none
в итоге в локи я вижу только ticket: none,а других value тупо нет
что я упускаю?
А коллекторы правильно настроены?
ну promtail с таким конфигом, по сути дефолтный https://pastebin.com/Ce7dwymT
А поды все в одном ns обитают?
не, в разных всё
level=info ts=2023-09-22T09:07:47.733716656Z caller=filetargetmanager.go:361 msg="Adding target" key="/var/log/pods/*d5f97f10-f7b0-42e2-87ab-ad19f078d7b0/mysql/*.log:{app=\"back-crypto\", cluster=\"eks-dev-eu-central-1\", container=\"mysql\", job=\"back-crypto/back-crypto\", namespace=\"back-crypto\", node_name=\"ip-10-2-3-92.eu-central-1.compute.internal\", pod=\"back-crypto-ftr-9946d0802f-57c445b7c8-9q9lc\", ticket=\"CRYP-956\"}" даже вот в логах видно что promtail всё нашел и добавил в скрейп, но локи часть value куда-то теряет
Проверь что не дропаются логи по неймспейсу, но я каких-то явных проблем в конфиге не вижу. Logql вообще этих подов не видит? Или только лейбл пропадает?
видит только ticket: none(который есть тоже на подах) а ticket: CRYP-956 например не видит, того и не понимаю ЧЗХ, ладно бы ничего не видел, а так одно что-то забрал и всё тут level=info ts=2023-09-22T09:07:47.733070046Z caller=filetargetmanager.go:361 msg="Adding target" key="/var/log/pods/*101511c7-8f73-4f6f-9d16-f5616d2fc3b8/back-crypto/*.log:{app=\"back-crypto\", cluster=\"eks-dev-eu-central-1\", container=\"back-crypto\", job=\"back-crypto/back-crypto\", namespace=\"back-crypto\", node_name=\"ip-10-2-3-92.eu-central-1.compute.internal\", pod=\"back-crypto-64dc7bc5c-wzthp\", ticket=\"none\"}"
Не, я имею в виду если искать по pod: podname , те поды, которые с этим тикетом находятся?
Ну тут хз, можно попробовать в конфиге явно задать regex и replacement, больше идей пока нету
перезапустил фиче поды - тикет нужный появился спустя время, даже если брать большой отрезок времени, он пропадает полностью 😄
Обсуждают сегодня