Привет! У меня опять вопрос по debezium, kafka, oracle делаю cdc из

оракла в постгрес
есть проблема с клобами: если изменить в строке значения не клоба, а любого другого атрибута, то как я понимаю в редо логи оракла значение клоба не пишется, и поэтому дебезиум подставляет __debezium_unavailable_value и это дело потом синком несется в таргет базу.
собственно как можно решить это дело? кроме триггера на таргете :)

гугл показывает обходной вариант с логирование для постгреса
https://debezium.io/blog/2019/10/08/handling-unchanged-postgres-toast-values/
но он для постгреса и выглядит дорогим в смысле нагрузки на базу.

6 ответов

14 просмотров

привет! есть вот такая настройка: https://debezium.io/documentation/reference/2.1/connectors/oracle.html#oracle-property-lob-enabled

Валерия-Капишевская Автор вопроса
Андрей Романов
привет! есть вот такая настройка: https://debeziu...

у меня она включена то есть просто загрузка новой строки с лобом работает не работает изменение атрибута, который не лоб. Дебез для лоба тогда ставит дефолтное значение __debezium_unavailable_value, вместо того чтобы просто не трогать его

Валерия Капишевская
у меня она включена то есть просто загрузка новой ...

ого, блен, а вот такого у меня не было( тут помочь не могу, сорри(

Валерия Капишевская
у меня она включена то есть просто загрузка новой ...

А чем вы читаете дебезиум лог и почему там не поменять логику? Вроде выглядит не очень сложно

Валерия-Капишевская Автор вопроса

не поняла вопрос оракл читаю логмайнером через дебезиум, он складывает в топики сообщения с изменением строк. И уже в этих сообщениях появляется __debezium_unavailable_value. потом kafka jdbc sink коннектор грузит изменения в постгрес. в сообщениях уже стоит __debezium_unavailable_value, поэтому в постгрес он их и грузит.

Валерия Капишевская
не поняла вопрос оракл читаю логмайнером через деб...

Ответом на вопрос является kafka jdbc sink connector) понятно) просто я сам писал синк и там несложно заложить какую хочешь логику, на входе же простой жсон/авро) Наверное стоит копать в сторону коннектора)

Похожие вопросы

Обсуждают сегодня

Подскажите, а есть vault lite или ченить такое?) А то нужен вольт для похода в вольт, но весит он ~500 мб) как-то многовато для парочки запросов ))
Alexandr Orloff
17
Всем привет, есть небольшая проблема Есть такой скрипт document.addEventListener('DOMContentLoaded', function () { const sliderTabs = document.querySelectorAll('.s...
A da
8
@go1337 @dblackCat Привет. Все ещё дрочусь с fastpanel. Добавил второй домен который должен смотреть в рут того же сайта, но так как это просто домен, а не сайт, я не могу ему...
Ross 🦴
9
До речі, в ево нема можливості чи якого розширення щоб з адмінки з телефона зайти і терміново щось в верстці поправити?
Женя
7
кто-нибудь пользуется тайм-трекерами во время работы? так много разных нагуглил, может есть что-то популярное
Lencore
8
Пацаны. Я разрабатываю софт для инвайтинга на телетон, и столкнулся с такой проблемой, в один из чатов не могу приглашать никого, не дает добавлять, в то же время через официа...
Kernel Panic
11
Скажите, а кому нужен Currency как отдельный плагин вместо полноценного ecommerce в OctoberCMS? Кто-то использует его уже или планирует в будущем? Может я что-то не понимаю?
Igor
13
Розмовами про Рево мені нагадали часи, коли шаблони правилися прямо в адмінці. Хто в курсі, чому відійшли від цієї практики, так блейд не працює? Доволі зручно ж було (інколи)
Женя
3
Всем добрый вечер, Рад оказаться в кругу единомышленников. Начинаю погружаться в мир .net веба. Зовут Ерасыл 🖖 У меня назрел вопрос: Какой процент проектов, прошедшие через в...
Ерасыл
6
Чому? Да тому що без GiT не уявляю нормального проекта а коли код в базі то то так собі
Dmytro Lukianenko
3
Карта сайта