185 похожих чатов

Https://Github.Com/Erlang/Otp/Blob/OTP-27.1/Lib/Kernel/Src/Logger_h_common.Erl#L174 Https://Github.Com/Erlang/Otp/Blob/OTP-27.1/Lib/Kernel/Src/Logger_olp.Erl#L76 15 лет назад меня попросили посмотреть, почему кролик отваливается, не

работает и сжирая весь процессор и память падает.

Я нашел эту проблему и она никуда не делась.

Неужели в OTP настолько не пересекаются с высокими нагрузками?

20 ответов

5 просмотров

мы пересекаемся

его используют в таких командах где не считают процессорное время и память

Maksim-Lapshin Автор вопроса
Иванов
его используют в таких командах где не считают про...

к чему эта нелепость. Когда данные перестают утекать, неважно сколько у тебя памяти и процессора

если я возьму слабый нетбук чтобы легче было перегрузить, как это воспроизвести? тупо в один обменник пихать на хренаста потребителей и продюсеров или более сложные условия надо?

Д. П.
если я возьму слабый нетбук чтобы легче было перег...

Настроить handler так, чтоб он не уходил в sync или drop

Maksim-Lapshin Автор вопроса
Д. П.
если я возьму слабый нетбук чтобы легче было перег...

Достаточно устроить тысячу крешей в секунду с большими бинарями в стейте

а можешь поточнее описать, в чём проблема? Я в этом коде вижу: * потенциально долгое форматирование делается в контексте клиента * опциями можно ограничить размер распечатанного лога (опять же в контексте клиента) * в зависимости от глобального флага в гипотетически бесплатном хранилище (persistent_term) логирование может слегка притормозить клиентский процесс * на каждом сообщении логгер проверяет размер своего ящика и может поменять режим логирования * все пределы (`sync_mode_qlen`, drop_mode_qlen, `flush_qlen`) настраиваются * до синглтона долетают небольшие бинари, да и то если очередь не переполнена > устроить тысячу крешей в секунду с большими бинарями в стейте это может ударить по SASL и супервизору, но не должно сильно ударить по логгеру

Maksim-Lapshin Автор вопроса
Maksim Lapshin
Форматирование убивает

какие параметры по глубине и максимальному размеру записи лога?

Sergei
Настроить handler так, чтоб он не уходил в sync ил...

вот тут я не понял, можешь как для танкистов?

Д. П.
вот тут я не понял, можешь как для танкистов?

могу! https://www.erlang.org/docs/26/apps/kernel/logger_chapter.html#message-queue-length

Д. П.
понял!

вот тут интересное: If sync_mode_qlen is set to the same value as drop_mode_qlen, synchronous mode is disabled. That is, the handler always runs in asynchronous mode, unless dropping or flushing is invoked. и у этой палки два конца: 1) если sync выключен, дроп запредельный и много логов, то они будут копиться в очереди хэндлера; 2) если sync включен, то ты блочишь процесс, который что-то логирует, и можешь получить распухшую очередь уже в нём. короч, сильно завсит от приложения и от того, насколько важны логи

Sergei
вот тут интересное: If sync_mode_qlen is set to th...

куда ни кинь — всюду клин. если не успеваем логи, то без разницы в каком месте, или та или другая очередь все равно завалит систему.

Д. П.
куда ни кинь — всюду клин. если не успеваем логи, ...

flush_qlen The handler process increases its priority during the flush loop to make sure that no new events are received during the operation

Maksim-Lapshin Автор вопроса
Д. П.
куда ни кинь — всюду клин. если не успеваем логи, ...

не обязательно. Учитывая, что эрланг из коробки очень говорлив, логи происходят большим всплеском, когда что-то крешится. Соответственно в этот момент они просто избыточны

Иванов
Звучит как-то фаталистически

не, ну значит нам надо ещё одно ядро с процессом отдельно и логи слать туда в сыром виде. не? насчет крешей, да, я считаю что let it crash на проде надо оставлять для самых нереальных случаев. если у нас такая нагрузка, что на форматирование не хватает процессора, то как минимум основных 20% случаев надо в обработчик

Похожие вопросы

Обсуждают сегодня

Ребят в СИ можно реализовать ООП?
Николай
33
~ 2m21s  nix shell github:nixos/nixpkgs#stack ~  stack ghc -- --version error: … while calling the 'derivationStrict' builtin at /builtin/derivation.nix:...
Rebuild your mind.
6
Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
core\config\database\connections\default.php На всякий случай проверь всё же файл <?php return [ 'driver' => env('DB_TYPE', 'mysql'), //$database_type 'host' => env('D...
Andrey K
2
Всем доброго вечера. Разрабатываю 32 раз. приложение в Delphi. Столкнулся с тем, что стандартный  TFilestream  не работает с большим файлом > 2 ГБайт (после вызова функции see...
Vadim Gl
16
Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
добрый день. Подскажите, есть сайт на 1.4.7 и я хочу обновиться, особо ничего не меняя. мне выбирать версию 1.4.35 или третью ветку? и можно ли обновлять "как есть", или нужно...
Digital Cat
12
народ, плиз хелп, всю голову сломал себе уже... разве может быть так, что GetProcAddress( GetModuleHandle( "kernel32.dll" ), "SetThreadDescription" ) вернёт ненулевое значение...
Iluha Companets
12
Кто кодит под Лазарем на винде, у вас аналогично VCL переопределяются CreateWnd и CreateParams для конкретных классов контролов и все заданные флаги влияют?
А Андрей
11
У меня задача: написать брокер сообщений. Очереди и потребители. Очереди поддерживают приоритеты. Очередь отдает сообщения, только обработчикам с соответствующими характеристи...
Aleksandr Filippov
2
Карта сайта