184 похожих чатов

Есть вопрос по интеграции с Кафкой и MV в

целом.

Есть MV, которая разбирает данные в формате JSONAsString. В структуру этого json добавляют новое поле, соответственно, надо поменять MV. Но в DDL для MV отсутствует конструкция OR REPLACE.

Можно только так:

DROP TABLE my_mv;

CREATE MATERIALIZED VIEW my_mv
...

Как правильно поменять MV под новую структуру без потери данных?

6 ответов

22 просмотра

https://clickhouse.com/docs/en/sql-reference/statements/alter/view

Dmitrii-Apanasevich Автор вопроса
Slach [altinity]
https://clickhouse.com/docs/en/sql-reference/state...

и данные из таблицы с кафка-движком при этом не будут потеряны на время этого действия?

Dmitrii Apanasevich
и данные из таблицы с кафка-движком при этом не бу...

тут вот не могу сказать 100 точно https://kb.altinity.com/altinity-kb-integrations/altinity-kb-kafka/altinity-kb-kafka-main-parsing-loop/ кафка никакого INSERT не делает, она читает топик и формируется INSERT блок в MV уже... и я не помню ошибки в MV они не дают librdkafka consumer читать топик, или чтение топика продолжается... если не дают, тогда все ок, старые сообщения пойдут по старому формату, новые по новому но вообще вам бы больше подошел подход чтения исходной строки как строка и набора полей которые через DEFAULT JSONExtract задаются...

DROP TABLE my_mv; CREATE MATERIALIZED VIEW my_mv тоже не теряет данные если MV только одно. когда вы дропаете MV консьюм из кафки прекращается

Dmitrii Apanasevich
и данные из таблицы с кафка-движком при этом не бу...

самый безопасный способ DETACH kafka_table 2. ... any modifications of derived MV (CREATE may not work, because kafka table is detached, but ATTACH MATERIALIZED VIEW will) 3. ATTACH kafka_table

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта