Всем добрый день. Подскажите, пожалуйста, кто сталкивался... Вот график среднего расхода

Question

Всем добрый день. Подскажите, пожалуйста, кто сталкивался... Вот график среднего расхода

памяти за последние 60 дней.
С числа 5 августа средний расход начал расти...
29 августа был сбой сервера — перезагружали. Траты памяти обнулились, а потом снова уверенный линейный рост..

На что смотреть? Где искать? Что это может быть?

#backend #clickhouse #database #devops #programming #russian

0

13.09.2022

18 ответов

21 просмотр

Юрий Шахов Автор вопроса

Slach [altinity]
какая версия clickhouse?

22.4.5.9

0

13.09.2022

Slach [altinity]

Юрий Шахов
22.4.5.9

обновите до 22.8

0

13.09.2022

Юрий Шахов Автор вопроса

Slach [altinity]
обновите до 22.8

ок

0

13.09.2022

Александр Благов

Slach [altinity]
обновите до 22.8

В 22.8 пофиксили утечку памяти с kafka engine ?

0

13.09.2022

Slach [altinity]

Александр Благов
В 22.8 пофиксили утечку памяти с kafka engine ?

https://github.com/ClickHouse/ClickHouse/pull/40732 да

0

13.09.2022

Александр Благов

Slach [altinity]
https://github.com/ClickHouse/ClickHouse/pull/4073...

отличная новость, спасибо больше за наводку

0

13.09.2022

Paul Boo

Александр Благов
отличная новость, спасибо больше за наводку

пофиксили, но собранных пакетов пока вроде нет

0

13.09.2022

Denny [Altinity]

Paul Boo
пофиксили, но собранных пакетов пока вроде нет

зарелизили сегодня https://github.com/ClickHouse/ClickHouse/compare/v22.8.4.7-lts...v22.8.5.29-lts

0

13.09.2022

Paul Boo

Denny [Altinity]
зарелизили сегодня https://github.com/ClickHouse/...

Шикарно, давно ждал. Спасибо :)

0

13.09.2022

Сергей Худояров

Denny [Altinity]
зарелизили сегодня https://github.com/ClickHouse/...

доброе утро. норм ли обновляться с 19.17.5.18 на эту версию? сейчас тестирую на стейдже

0

20.09.2022

Slach [altinity]

Сергей Худояров
доброе утро. норм ли обновляться с 19.17.5.18 на э...

читайте внимательно release notes https://docs.altinity.com/altinitystablerelease/releasenotes/ на тему несовместимостей сначала хотя бы на 20.8 или 21.8 попробуйте обновиться... обратно если что откатиться не получится и разные версии clickhouse в одном кластере для репликации тоже не советую держать

0

20.09.2022

Сергей Худояров

Slach [altinity]
читайте внимательно release notes https://docs.alt...

спасибо. получается, самое лучшее - это обновление одновременно 4х нод? судя по https://kb.altinity.com/upgrade/ сам процесс обновления не хитрый: - подготавливаем новые конфиги, чтоб быстро внести нужные правки - везде выполняем apt install clickhouse-server - service clickhouse-server restart - и проверяем логи, все ли норм прошло

0

20.09.2022

Slach [altinity]

Сергей Худояров
спасибо. получается, самое лучшее - это обновление...

да, сам процесс реально не хитрый... но нужно следить... с 19 года больше 3х лет прошло, очень много изменений внесено...

0

20.09.2022

Сергей Худояров

Slach [altinity]
да, сам процесс реально не хитрый... но нужно след...

ух конечно, когда ты не dba а простой админ) сейчас играюсь со стейджем, на нем несколько раз прогоняю процесс. есть скриптик, который позволяет писать 50К запросов\сек в одну таблицу (дали разрабы). провел сейча процесс обновления под этой нагрузкой - вроде ниче такого не было, все обновилось.. но как еще можно узнать, не будет ли подводных камней?

0

20.09.2022

Slach [altinity]

Сергей Худояров
ух конечно, когда ты не dba а простой админ) сейча...

можно узнать точно что они будут... какие конкретно, НИКТО не знает смотрите /var/log/clickhouse/ и приходите с конкретными вопросами

0

20.09.2022

Konstantin Sevastianov

Сергей Худояров
ух конечно, когда ты не dba а простой админ) сейча...

ну так то правильно было бы вставку всю отключить на время апдейта)

0

20.09.2022