184 похожих чатов

? течет память , куда копать ? контекст:

два кластера , однин далает запросы на другой через distributed ( настроен на хосты внешнего кластера). течка начинается у того к кому подключаются. до подключения distr никогда не текла память.
mv нет, кафки нет, версии этого года, в том числе последняя

23 ответов

11 просмотров

У КХ есть такая штука -- mark cache. Его размер по умолчанию 5ГБ выполните system drop mark cache и посмотрите насколько упадет потребление памяти

R-omk- Автор вопроса

ок, это можно заранее посмотреть в таблице с метриками ?

R-omk
ок, это можно заранее посмотреть в таблице с метр...

select * from system.asynchronous_metrics where metric ilike '%mark%';

R-omk- Автор вопроса
Denny [Altinity]
У КХ есть такая штука -- mark cache. Его размер по...

сделал, но там около 700kb судя по данынми из asynchronous_metrics , и по факту тоже ничего не поменялось

https://kb.altinity.com/altinity-kb-setup-and-maintenance/altinity-kb-who-ate-my-memory/#retrospection-analysis-of-the-ram-usage-based-on-query_log-and-part_log-shows-peaks

R-omk- Автор вопроса
Denny [Altinity]
https://kb.altinity.com/altinity-kb-setup-and-main...

system.query_views_log нужно отдельно включать ?

R-omk
system.query_views_log нужно отдельно включать ?

можете удалить из запроса, это новая таблица

R-omk- Автор вопроса
Denny [Altinity]
можете удалить из запроса, это новая таблица

ну показывает как и ожидалост вообьще мелочь т.е. если вопрос мог ли запрос который выполняется на внешнем кластере много данных читать то нет не мог, он итеративно раз в 15 минут забирает инкремент ,

а была?

R-omk- Автор вопроса
Denny [Altinity]
а была?

была 23.1 который течет, из него читал 23.3

R-omk
была 23.1 который течет, из него читал 23.3

т.е. у вас distributed over distributed? distributed смотрит на distributed в другом кластере?

R-omk- Автор вопроса
Denny [Altinity]
т.е. у вас distributed over distributed? distrib...

нет, я в кластере2 объявил в remote_servers все хосты из кластера1 , чтобы в кластере2 создать disttable

а ну так это обычная distributed. В КХ нет кластера, кластер в момент селекта возникает внутри Distributed таблицы воспроизводите дальше, ищите запрос который заставляет течь память

R-omk- Автор вопроса
Denny [Altinity]
а ну так это обычная distributed. В КХ нет класте...

там один единственный запрос запрос, я его точно заню

R-omk- Автор вопроса
R-omk
там один единственный запрос запрос, я его точно з...

вот его настройки и проифль из одного из запросов

R-omk- Автор вопроса
Denny [Altinity]
У КХ есть такая штука -- mark cache. Его размер по...

все оказалось гарадо проще.. SYSTEM DROP UNCOMPRESSED CACHE однако пока неизвесно почему он вообще включен, use_uncompressed_cache в конфиге отсутствует

R-omk
все оказалось гарадо проще.. SYSTEM DROP UNCOMPRE...

Это надо смотреть на инициаторе. Ну можно в профиле пользователя созданного через create user включить

R-omk- Автор вопроса
Denny [Altinity]
Это надо смотреть на инициаторе. Ну можно в профил...

так это не профильная настройка ведь, или я гоню

R-omk- Автор вопроса
R-omk
так это не профильная настройка ведь, или я гоню

реально, я даже скрин примслал , просто эта настройка доехала до удаленных хостоав и там включила кэш .. ппц

R-omk
реально, я даже скрин примслал , просто эта наст...

Так и задумано. Все настройки с инициатора передаются на шарды.

R-omk- Автор вопроса
Denny [Altinity]
Так и задумано. Все настройки с инициатора передаю...

ну мне только либо тип readonly менять, ведь иначе настройка все равно перекроет то что в профиле пользоватля ... в общем мне сейчас проще явно взапросе предать опцию с отключение кэша,

Похожие вопросы

Обсуждают сегодня

Anyone here suffers from unexplained aural migraines, who would be up for talking for a bit? Doesn't *have* to be aural, but I am not asking about headaches, I mean actual mi...
Martin Rys
55
А если для werf организовать отдельный репозиторий, а сервисы из проекта подключить как симлинки? И симлинки в гитигнор добавить?
Dmitriy Andreev
13
Ребят, всем привет. Недавно начал знакомиться с werf с целью автоматизировать сборку локальных dev стендов. Прошел гайд, почитал статьи на хабре. Появилось некоторое понимание...
Dmitriy Andreev
4
Всем здравствуйте!) У меня такой вопрос. Есть два роута, роут1 и роут2. Они связаны с очередью some_queue. По задаче предполагается, что есть два паблиша. Паблиш1 отправляет...
Format
10
Добрый день! Хочу спросить совета. Хочется в скрипт добавить некую конструкцию, что скрипт создал файл, который нужно потом скопировать в определенное место. Нашел такой сп...
Mikhail
3
Вопрос по WIN32: Насколько я понимаю то все функции win32 привязаны к объектам операционной системы. Например консоль, файл, кисть, окна итд. Следовательно функции win32 упра...
Tommy Vercetti
6
подскажите пожалуйста, как мне освободить результат записанный в переменную result? в чем проблема подскажите если МОЖЕТЕ?
Михаил Helper
28
кто-то пользуется компонентами rx ? как их лучше ставить, через OPM? (lazarus)
Iluha Companets
15
Hello, can I install macOS and run flutter on a virtual machine? Is it possible to print for iphone?
Mazones
11
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
Карта сайта