184 похожих чатов

И ещё вопрос 😁 Как лучше организовать schema evolution (кафка), например

если полгода вносились записи с одной схемой(например a, b, c), а затем понадобилось расширить схему до a, b, c, d, e, f. В документации рекомендуют остановить импорт, дропнуть всю таблицу и МВ, создать новую кафка таблицу и начать заливать по новой. А как быть с данными за полгода, они ведь получается пропадут? Или я чего-то не так прочитал?
Может как то через алиасы сделать? Или заранее создавать более широкую кафка таблицу в КХ с расчетом на будущее?

2 ответов

10 просмотров

Вы поняли все на 99% верно - недостающее знание в том, что ваша таргет таблица никуда не девается; пересоздаете вы лишь кафка таблицу (собственно, читает данные из кафки) и МВ (перекладывает из кафки в вашу таргет таблицу). Если вы создадите МВ без таргет таблицы (секция TO dbname.tablename), то да, данные будут терятся - но просто разделяйте таблицу с данными и МВ и будет успех

K-S Автор вопроса

Похожие вопросы

Обсуждают сегодня

А чем вам питонисты не угодили?😂
.
79
Язык Си можно выучить за день? По книжке ANSI C на 230 страниц
Vincent Vegan
29
Привет, запускаю werf в dind в k8s, получаю ошибку на этапе build/beforeSetup: /.werf/stapel/embedded/bin/bash: /.werf/scripts/5898bdfe5214357d3706b879cc8d3d78460fb379607cbd...
florius0
7
Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
Dim Dim, [02.07.2024 11:07] DB 0x62 Dim Dim, [02.07.2024 11:07] DB 0x66 Dim Dim, [02.07.2024 11:07] кто пояснит что это?
Dim Dim
14
Ошибка: segmentation fault (core dumped) Код: pastebin.com/BEsNNSSV Сообщение от компилятора: отсутствует ОС: Arch Linux Ядро: x86_64 Linux 6.9.7-arch1-1 Процессор: Intel Cele...
sec
4
Ребят, а за скок можно впарить анон чат с апишкой и веб админкой ?
Eugene Неелов
15
Ещё такой вопрос. Мне необходимо хранить пароль пользователя локально. Для этого планирую использовать ini файл. Это для автозаполнения полей логин и пароль при авторизации. Е...
Евгений
19
Кстати, я тут еще с одной темой столкнулся, вот учу я C++, на таком то ресурсе, а остальные постоянно советуют практиковаться, что то писать, проекты, но как писать если вот т...
aaswq1
7
Добрый день, чат. Мне в очередь из других RabbitMQ по shovel валятся метрики в формате текста для Prometheus. Помогите пожалуйста подружить RabbitMQ и Prometheus, чтобы он (...
Aleksey
4
Карта сайта