Всем привет. Решил я собрать в кучу все что описывал

Question

Всем привет. Решил я собрать в кучу все что описывал

с проблемами связанными с обновлением до версии 19.1.6. может кому будет интересно, а может кто скажет что я сделал что-то не так.
Итак, входные данные:
1) версия 18.14.18 (изначально я сказал что была 18.16.0, но ошибся)
2) обновление до версии 19.1.6
3) нагрузка на БД не меняется
Первое с чем столкнулся, это проблемы с запросами SHOW TABLES если параллельный процесс делал DROP TABLES (лог: https://drive.google.com/file/d/1hkirx-wp-aJtSOuzzcP999p_81WUQ285/view?usp=sharing):
1) делаю запрос: SHOW TABLES LIKE 'table_name%'
2) в ответ получаю ошибку: executeQuery: Code: 60, e.displayText() = DB::Exception: Table table_other_name doesn't exist., e.what() = DB::Exception
3) в это же время другой (параллельный) процесс успешно выполнил запрос: DROP TABLE IF EXISTS table_other_name
Использование обычного SELECT * FROM system.tables приводило к тому же результату. Пришлось читать данные с таблицы system.columns с группировкой по таблицам.
И второе что произошло: в определенный момент КХ просто упал (лог: https://drive.google.com/file/d/1xu6mmAS2CukSwRM_EVGcIH7ZY4K2UpZa/view?usp=sharing).
По ответам было предположение, что это происходит из-за динамичной структур БД. У меня действительно при постобработке данных используются (создаются/удаляются) таблицы для промежуточных данных. Но “динамичность” этих действий не менялась между версиями.
Решил откатиться. Откатил до 18.16.1 и началось дикое выедание оперативной памяти, т.е. на каких-то запросах память могла подскакивать но после их завершения не высвобождалась (processes/merges/replication_queue/mutations(не было не выполненных мутаций, да и не использую я их) было пусто), даже для тестов “уводил” все запросы с определенной ноды, единственное что происходило - останавливалось выедание памяти, только запросы возвращались опять все шло по нарастающей. Такая проблема уже была, на какой-то версии КХ (сейчас уже не помню на какой), но после ее обновления тогда проблема исчезла.
Сейчас откатился уже до 18.14.18 (та версия которая и была изначально), все стабилизировалось.

#backend #clickhouse #database #devops #programming #russian

0

10.02.2019

1 ответов

4 просмотра

Denny [Altinity] · Accepted Answer

Denny [Altinity]

https://github.com/yandex/ClickHouse/issues/3982 https://github.com/yandex/ClickHouse/issues/3976

0

10.02.2019

184 похожих чатов

Всем привет. Решил я собрать в кучу все что описывал

1 ответов

Похожие вопросы