и аккумулирует огромное количество access_log'ов от NGINX
ELK или какие то иные инструменты?
давайте мериться логами?
у кого больше....
за сутки набегает и где храняться...
Если ответ ещё актуален, то складываю в кафку и агрегирую с помощью kafka streams
Есть и существенно больше. Но не через кафку, а через rsyslog. На уровне rsyslog делаются преобразования в более бинарньій вид, чтоб более компактно хранить в кликхаусе, или распаршивать некоторьіе аргументьі или куки. Цепочка приблизительно такая: nginx -> rsyslog -> chproxy -> ch(Buffer -> ReplicatedMergeTree)
Обсуждают сегодня