from нынешнюю дату.
То в логах пишется след:
caller=flush.go:220 org_id=fake msg="failed to flush user" err="QuotaExceeded: \n\tstatus code: 403, request id: tx000000000000049ce1435-0062bc4cbf-3b7e16c-dt2, host id: "
И ничего не показывает очевидно и не забирает никакие логи.
Что было прочитано?
То что проблем с дисковой квотой (я добавлял место, ребутал сервер) - толку 0.
iops смотрел, тоже всё ок.
Куда копать?
403 ошибка намекает на проблемы с доступом же? авторизация
Опустим nginx (сейчас) Я поставил дату которая еще не наступил, логи пишутся только последние 2 минуты и опять по новой. Сейчас же он не намекает на проблемы с доступом. Я могу попробывать конечно (там действительно есть некая проблема с доступом для нас(пользователей), но почему тогда сейчас всё вроде окей работает?
так он пишет логи в течение двух минут, пока не создается схема? В моем представлении выглядит так: - задается дата в будущем - логи пишутся (возможно сохраняясь в памяти. но не сбрасываясь в хранилище, схемы же нет?) - наступает дата из будущего - создается схема - локи пытаетс сбросить в хранилку - 403 ошибка и аллес Но я могу ошибаться. МОжет и не такая логика.
Вас услышал, спасибо за разъяснение, сейчас попробую в штатном режиме включить (создав схему с сегодняшней даты)и пофиксив nginx.
я не уверена, что права, просто рассуждения исходя из документации. Я не сталкивалась с таким.
Не помогло, буду думать дальше.
то есть 403 ошибка ушла,а проблема с тем, что логи не собираются сохраняется?
нет, 403 так же осталась, точно такая же ошибка как и сверху Ну и соответственно логов нет
У вас же s3 хранилка? Возможно локи не может на неё достучаться ?
авторизация это 401, 403 - отсутствие прав на выполнение запрашиваемого действия
В общем, попытаюсь с самого начала расписать. Всё работало в штатном режиме с 2021 года и как -то резко мне прилетел аллерт мол мало места на диски (lтам где локи) я пошел смотреть и в syslog очень записей пишется раз в секунду примерно, ошибка которая сверху. Ну и до сих пор не могу реанимировать его
Узнай квоты на с3, проверь место, ты это сделал?
С чего ты взял, что проблема с диском, а не с удаленной хранилкой?
Да, я был не прав в своих действиях. Пересоздал бакет. Настроил lifecycle(до меня не знаю как его настраивали и кто) И сейчас всё завелось. Всех благодарю!
Обсуждают сегодня