А никто случайно не пробовал бекапить таблицу с движком EmbeddedRocksDB?

Question

А никто случайно не пробовал бекапить таблицу с движком EmbeddedRocksDB?

Вроде выглядит процесс понятно, тупо сохраняю где-то данные из /var/lib/clickhouse/data/test_db/test_rock, табличку дропаю и создаю, сохраненные данные копирую обратно, делаю детач/аттач таблицы, и данные появляются, все супер.

Но потом какая-то хрень начинается, вставляю в восстановленную табличку еще данных, повторяю процесс, но таблица не артачится, запрос падает с ошибкой Code: 555. DB::Exception: Failed to open rocksdb path at: /var/lib/clickhouse/store/bad/bade453c-88d9-4c5a-8f67-40cc67987fc8/: Corruption: Corruption: IO error: No such file or directory: While open a file for random read: /var/lib/clickhouse/store/bad/bade453c-88d9-4c5a-8f67-40cc67987fc8//000009.ldb: No such file or directory. (ROCKSDB_ERROR) (version 22.9.3.18 (official build))

Мб я что-то не так делаю?

#backend #clickhouse #database #devops #programming #russian

0

04.09.2023

4 ответов

22 просмотра

Кирилл Маньков Автор вопроса

Slach [altinity]
Там скорее всего какие то файлы просто не записали...

Попробую, спасибо

0

04.09.2023

Slach [altinity]

Кирилл Маньков
Попробую, спасибо

напишите если получится

0

04.09.2023

Кирилл Маньков Автор вопроса

Slach [altinity]
напишите если получится

Ага, напишу, что получится

0

04.09.2023

Slach [altinity] · Accepted Answer

Slach [altinity]

Там скорее всего какие то файлы просто не записались на диск до конца надо по идее стопнуть INSERT делать flush для буферов sync; echo 1 > /proc/sys/vm/drop_caches копировать через хардлинки cp -l /var/lib/clickhouse/data/db/table /var/lib/clickhouse/backup/backup_name/db/table

0

04.09.2023

184 похожих чатов

А никто случайно не пробовал бекапить таблицу с движком EmbeddedRocksDB?

4 ответов

Похожие вопросы