Привет! Подскажите, пожалуйста, можно ли в loki сделать ограничение на

количество строк лога на промежутке времени (или размера в mb на промежутке времени) , чтобы то , что за пределами этого лимита просто терялось.
Т.е. приложение пишет 5млн строк лога за 3 минуты - хочу ограничить чтобы за 3 минуты можно было только 1млн записать а остальное игнорить?

10 ответов

38 просмотров

https://grafana.com/docs/loki/latest/clients/promtail/stages/limit/

Mikhail-Maslov Автор вопроса
Vadim Rutkovsky
https://grafana.com/docs/loki/latest/clients/promt...

это видел, тут не понятно какой промежуток времени. Т.е ограничение в мб , а время?

Mikhail Maslov
это видел, тут не понятно какой промежуток времени...

А откуда ему считать время? Оно считает плавающее окно и кол-во мегабайт логов, отсюда рейт

Mikhail-Maslov Автор вопроса
Vadim Rutkovsky
А откуда ему считать время? Оно считает плавающее ...

а каким параметром регулировать стейдж drop ? [drop: <bool> | default = false] для rate и burst вижу ingestion_rate_mb: ingestion_burst_size_mb: а для реджектов этот? в описании вроде про "old" а мне надо наоборот новые скипать # Whether or not old samples will be rejected. # CLI flag: -validation.reject-old-samples [reject_old_samples: <boolean> | default = true]

Mikhail Maslov
а каким параметром регулировать стейдж drop ? [d...

Вообще не понятно. Ты имеешь ввиду "как ему сказать что дропать?"

Mikhail-Maslov Автор вопроса
Vadim Rutkovsky
Вообще не понятно. Ты имеешь ввиду "как ему сказат...

да, по ссылке https://grafana.com/docs/loki/latest/clients/promtail/stages/limit/ написано типа надо выставить в true [drop: <bool> | default = false] но в https://grafana.com/docs/loki/latest/configuration/#limits_config я соответсвующего параметра не вижу

Mikhail Maslov
да, по ссылке https://grafana.com/docs/loki/late...

https://grafana.com/docs/loki/latest/clients/promtail/pipelines/ Все что наматчилось в предыдущих стадиях будет использоваться с стейдже limit. Drop только переключает режим "выбросить/подождать пока нагрузка спадет"

Mikhail-Maslov Автор вопроса
Vadim Rutkovsky
https://grafana.com/docs/loki/latest/clients/promt...

правильно понимаю, что я могу фильтровать на этапе матча все что мне нужно а потом в limit указать типа - limit: rate: 100 burst: 100 drop: true и тогда у меня в локи будет по 100 строк в секунду, в соответсвии с моими фильтрами в match а все что больше будет дропаться?

Mikhail-Maslov Автор вопроса
Vadim Rutkovsky
да

спасибо!

Похожие вопросы

Обсуждают сегодня

Ребята, всем привет. Подскажите, пожалуйста, можно ли как-то через бота понять, что этого бота добавили в группу\канал и выдали ему права администратора?
Artem Stormageddon
9
Привет, такой вопросик появился кажется ли вам что Rust слишком сложный/строгий для высокоуровневого программирования и слишком "безопасный"/строгий для низкоуровневого?
Крокант
10
Это переведённый текст с английского. Я не говорю на русском, но могу использовать переводчик Телеграм. Приветствую! Я начинающий веб-разработчик и все еще учусь. В настояще...
𐩱𐩪𐩣𐩱𐩲𐩺𐩡
3
А какие существуют способы обработки ошибок выделения памяти в ядре? Т.е., допустим, есть функция, которая возвращает адрес свободной страницы в физической памяти и диапазон в...
disba1ancer
51
Всем привет. Хотел бы написать для себя свою ос. Причины: 1) нужен опыт в чем-то 2) будет меньше весить 3) свое, но там будут свои задумки Я понимаю что нужно писать для всег...
Shadow Akira
18
А не хотим ли мы развлечься? 😉 Но так чтобы с пользой для наших профессиональных навыков?? 👨‍🎓👩‍🎓 Предлагаю на октябрь запланировать тестовый запуск новой командной игры "Игр...
Andrii Kurdiumov
2
Всем привет! Скажите, никто не пытался уменьшить размер процесса ssl, которые ассоциируется с открытым соединением (не помню точное название этого процесса, но там была какая-...
Алексей
20
5? да там все 10
Boris Vinogradov
12
Привет всем! Почему этот код не срабатывает при добавлении или удалении пользователя из чата? bot.on('chat_member', async (ctx) => { console.log(ctx); }) bot.launch({allo...
Alexander
5
что такое erg?
Maksim Lapshin
2
Карта сайта