184 похожих чатов

День добрый. А подскажите, пожалуйста, есть ли готовое решение при

бэкапе методом фриза партиций. Проверить, что в этот момент не идет вставка в партицию? Проверять processlist на предмет Insert и system.replication_queue'?

5 ответов

18 просмотров

а зачем вам проверять что идет вставка в партицию? freeze создает hardlink только на вставленные парты в партиции на момент старта freeze все что попадет позже просто не войдет в бекап... чего именно вы хотите добиться такой проверкой?

Dmitriy-S Автор вопроса
Slach [altinity]
а зачем вам проверять что идет вставка в партицию?...

у нас есть большая таблица Insert Only с партами по неделе и раз в неделю хочется ее бэкапить и быть уверенным, что бэкап будет консистентным и не делался в момент, когда эту партицию перенаполняли из источника или был большой лаг на реплике или другие непредвиденные сценарии.

Dmitriy S
у нас есть большая таблица Insert Only с партами ...

Вы не можете перенаполнять эту партицию в другую таблицу и потом просто делать ALTER TABLE REPLACE PARTITION ?

Dmitriy-S Автор вопроса
Dmitry [Altinity] Titov
Вы не можете перенаполнять эту партицию в другую т...

в таком случае не нужно бэкапить текущую исходную таблицу. А в скрипте хочется все предусмотреть и если партиция "занята", то отложить выполнение, например, на сутки

Dmitriy S
у нас есть большая таблица Insert Only с партами ...

по вашему сообщению не очень понятно вы различаете парты и партиции? чтобы избежать большого лага по реплике, в clickhouse-backup делается для Replicated таблиц SYSTEM SYNC REPLICA с настраиваемым timeout ну и вы никак не можете избежать ситуации когда в эту эту таблицу будет вставка после начала FREEZE ... поэтому непонятно все таки чего именно вы пытаетесь избежать понятие "консистентности" в clickhouse eventually (консистеность при отсутвии вставок когда нибудь будет достигнута) транзакций нет... только "атомарные" вставки и "аторманые" мержи в бекграунде...

Похожие вопросы

Обсуждают сегодня

коллеги, добрый вечер! А никто не знает как модальная форма может себя закрыть? Ну допустим модальная форма определила, что смысла ей работать нет и хочет вернуть modalResult...
Михаил
83
А если изначально бот работал так : есть сайт онлайн школы. У каждого ученика свой кабинет. Где он авторизуется по своим данным. И уже в кабинете, на самом сайте делает оплату...
Денис 💡 Фрилансер
13
Добрый день Хочу начать обучение языку, не являюсь представителем it, буду благодарна за помощь, совсем пока не понимаю ничего) Подскажите, пожалуйста, где можно начать первы...
Sara Lala
19
А что ты вообще делаешь ?
Yesgoter
13
средствами IBX как-то можно выполнить запрос insert ... returning?
Igor
31
На работе пишем распределенное приложение, у которого сотни, если не тысячи настроек. Конфиги написаны на xml, расположены на разных хостах и должны быть согласованы друг с др...
Aleksandr Druzhinin
5
Всем привет 🙂 Какая-то непонятная проблема у меня с видео, раньше такого не было. Загружаю видео с гугл диска именно в видео mp4 и меняю ссылку как положено вот она: https://d...
Ксюша|Верстка на Тильде|Дизайн 🦥
6
Hi there everyone Is there anyone who have not started hamster bot yet? I need only one, I'll be glad if you do this for me DM if you haven't yet
Mehrshad
53
А как старый хаскел с новым стыковать ? потому как тут работает https://play.haskell.org/saved/C3xpMzcd, а вот тут https://stepik.org/lesson/7602/step/9?unit=1473 нет ошибка C...
Fedor
131
А какие у этого try практические плюсы перед eval?
Oleg Volkov
41
Карта сайта