Есть некий сервис на С++, который состоит из множества частей.

Question

Есть некий сервис на С++, который состоит из множества частей.

Хотелось бы понимать в разные моменты времени, какие части приложения сколько выжрали оперативной памяти. То есть организовать достаточно детализированный профайлинг памяти для приложения.

Сейчас регулярно снимается стастика с аллокатора (jemalloc), но понятное дело, что это говорит только о ситуации для всего приложения.

Есть идеи, как подобное организовать?

Первое, что мне приходит в голову - разным частям приложения раздать разные аллокаторы и зафорсить по крайней мере для начала административно их использование в различных подсистемах приложения. Ну или свой аллокатор с какими-то метками для каждой части приложения, которые при аллоках\деаллоках будет заниматься подсчётом нужной статистики.

Почему не используются готовые утилиты профайлинга - они не дают нужной точности.

Если важно - С++14

#c++ #embedded #programming #russian

0

13.08.2020

8 ответов

5 просмотров

Андрей Руссков

микросервисы? )

0

13.08.2020

magras

Для винды я когда-то давно писал свою тулзу, которая инжектилась в любой запущенный процесс, хукала стандартные функции аллокации/деаллокации и пересылала лог операций со стэктрейсами в другой процесс. Оверхед был заметный, интерфейс - ужасный, и у меня не было времени разобраться почему не удавалось выгрузить мою либу из процесса. Но если интересно могу поискать сырцы.

0

13.08.2020

Timur Safin

в Windows DDK, например, драйвера и подсистемы использовали разные теги в аллокациях для таких целей https://docs.microsoft.com/en-us/windows-hardware/drivers/ddi/wdm/nf-wdm-exallocatepoolwithtag

0

13.08.2020

Andrei K

У intel vtune amplifier-а есть профайлер памяти, который даже вроде бы не семпалми работает. Но ему надо заинструментировать код. У меня работало на виндовом стендалоун приложении в 2кк строк.

0

13.08.2020

Dmitry Sokolov

Я делал на основе pmr, singlton registry именованных ресурсов, которые просто прокси в default resource со счётчиками. Всю инфу по счётчикам можно получить через registry. Уровень детализации тут на вкус, хоть до каждого класса. При этом не обязательно делать контейнеры pmr, можно сделать stateless allocator параметризуемый singlton-ресурсом, который может выглядеть примерно так: struct my_resource { static memory_resource* get() { static auto* mem = get_counted_memory_resource("My-memory"); return mem; } }; Ну и таким образом можно ещё повозиться с type_info и для контейнеров вообще это дело зашаблонить, using vector<T> = std::vector<T, counted_alloc<T, vector_alloc_resource<T>>>.

0

14.08.2020

Woof Собач

Вай нот наколхозить макрос который на каждую аллокацию рисует переменная по ключу $x увеличся? В жапке такое легко делается агентами

0

15.08.2020

🐙 Antony Polukhin

Там у jemalloc есть особый режим профилировки, он выдаёт достаточно подробную инфу о том, кто сколько сейчас держит памяти, кажется с трейсами. Включается какими-то рантайм флагами

0

15.08.2020

Andrew Khoma · Accepted Answer

Andrew Khoma

А почему бы просто не создать некого Owner-а каждому алокатору?

0

13.08.2020

170 похожих чатов

Есть некий сервис на С++, который состоит из множества частей.

8 ответов

Похожие вопросы