184 похожих чатов

Всем привет! Возник вопрос по работе с низкоуровневыми данными после развала

партиции (повреждены idx, mrk).
Судя по документации, флаг force_restore_data работает только с репликацией, но есть возможность читать данные из файлов напрямую.
Пример из документации:

SELECT count( ) FROM file('primary-hits_UserID_URL.idx', 'RowBinary', 'UserID UInt32, URL String');

Может быть кто-нибудь видел тул, документацию или пример чтения данных из *.bin файлов? Описание MergeTree говорит, что в этих файлах данные идут блоками, каждый блок отдельно сжимается (по умолчанию LZ4).
Или может быть документацию о возможности пересчета служебных данных о таблице?

7 ответов

11 просмотров

каким образом сломалось? на самом деле bin невозможно прочитать без idx и mrk

https://habr.com/ru/articles/539538/

Anton-Demenev Автор вопроса
Denny [Altinity]
каким образом сломалось? на самом деле bin невозм...

вечером эксплуатация делала alter table ... delete where ... не сделав бэкап. по итогу утром, когда меня уже позвали, имелось DB::Exception: Bad size of marks file ... 936, must be: 1248

Anton Demenev
вечером эксплуатация делала alter table ... delete...

какая версия КХ? все запросы падают или только определенный? что если парт перемержить?

Anton Demenev
вечером эксплуатация делала alter table ... delete...

если это skipping index ругается (мы ловили такое после мутации), то достаточно его перематериализовать

Anton-Demenev Автор вопроса
Denny [Altinity]
какая версия КХ? все запросы падают или только о...

падало что угодно, попадающее в этот парт. в итоге сделали детач партиции, сейчас я развлекаюсь с холодной копией данных. обратно фарш отказался провёртываться, что ожидаемо) попытка выполнить attach ... partition заканчивается primary.idx is unexpectedly long. холодная копия бралась 20.5.4.40, попытки работы с данными идут на 21.1.11.3.altinitystable

Anton-Demenev Автор вопроса
Denny [Altinity]
https://habr.com/ru/articles/539538/

спасибо! статья отличная!

Похожие вопросы

Обсуждают сегодня

Какой-то там пердун в 90-х решил, что есть какая-то разная типизация. Кого вообще это волнует?
КТ315
49
void terminal_scroll() { memmove(terminal_buffer, terminal_buffer + VGA_WIDTH, buffer_size - VGA_WIDTH); memset(terminal_buffer + buffer_size - VGA_WIDTH, 0, VGA_WIDTH); ...
Егор
47
Всем привет! Подскажите, пожалуйста, в чем ошибка? Настраиваю подключение к MySQL. Либы лежат рядом с exe. Все как по "учебнику"
Евгений
16
А можете как-то проверить меня по знаниям по ассемблеру?
A A
132
Здравствуйте! У меня появилась возможность купить книгу "Изучай Haskell во имя добра!". Но я где-то слышал, что эта книга устарела. Насколько это правда??
E
22
Здравствуйте! Я вот на stepic решаю задачи на хаскеле https://stepik.org/lesson/8443/step/8?unit=1578 мой код import Data.List (isInfixOf) removing :: String -> [String] ->...
E
10
Камрады, кто тесно работал с vtv, хотел уточнить. Ширина column задаётся жёстко на этапе создания дерева или можно в рантайме ее менять программно (не мышкой)?
Ed Doc
10
да ладно ... что там неочевидного ? глянуть в исх-ки датасета и/или кверика чтобы понять в каком месте и как выполняется обращения к св-вам blablaSQL - минутное дело, даже е...
Сергей
7
Здесь для arm кто-нибудь кодит ?
Nothing
52
Всем привет, у меня есть сервер принимающий входящие HTTP подключения, как проверить, что подключение было через прокси или нет, есть какие то поля в заголовках по которым мо...
Кибер Бомж
8
Карта сайта