184 похожих чатов

Есть еще вопрос по бекапированию. Какие механизмы реализованы у вас?

и какой объем данных бекапируется?
что посоветуете для объемов 30 ТБ+?

9 ответов

24 просмотра

30+ это на один сервер или на несколько? у нас есть инсталяции clickhouse-backup где 15-20Tb на один сервер, нужны жирная сеть для remote_storage и чтобы CAP_SYS_NICE была выставлена capability чтобы clickhouse-backup мог себя по приоритетам ограничить в целом sync внутри VM и стапшоты инкрементальные VM тоже работают, но при восстановлении какие то парты могут в detached уйти...

Vitaliy-Kryukov Автор вопроса
Slach [altinity]
30+ это на один сервер или на несколько? у нас ест...

А как согласуются бекапы клика с бекапами зукипера или кликкипера?

Vitaliy Kryukov
А как согласуются бекапы клика с бекапами зукипера...

из коробки никак... более того clickhouse-backup не бекапит replication_queue стейт для ReplicatedMergeTree таблиц при полном восстановлении... сначала делается DROP TABLE что чистит состояние реплики... потом CREATE TABLE получаем пустую реплику и потом ATTACH PART - который реплицруется по остальным репликам при частичном восстановлении у вас просто ATTACH PART

Vitaliy-Kryukov Автор вопроса
Slach [altinity]
из коробки никак... более того clickhouse-backup ...

Вы имеете ввиду, если зукипер с нуля? Или в любом случае?

Vitaliy Kryukov
Вы имеете ввиду, если зукипер с нуля? Или в любом ...

в любом случае бекап кипера это бекап кипера... просто как то состояние сохраняете... бекап кликхауса это бекап данных кликхауса

На таких обьемах бекапирование экономически мало целесообразно. Просто посчитайте стоимость СХД на 7 дней хранения (например) и время восстановления. Клик это не Postgre.

На таких объемах только снепшоты. Можно глянуть в сторону zfs или ceph

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта