Доброго времени! Ребят, кто юзает kafka и debezuim в докере

подскажите пожалуйста как заставить UI debezuim автоматом создавать топики при настройке коннектора?
Использую образ
kafka image: docker.io/bitnami/kafka:3.4 с переменной KAFKA_CFG_AUTO_CREATE_TOPICS_ENABLE=true, а также образ
kafka-connect image: quay.io/debezium/connect:latest с переменной CONNECT_TOPIC_CREATION_ENABLE=true.
Читаю доку https://debezium.io/documentation/reference/stable/configuration/topic-auto-create-config.html и не пойму чего еще не хватает, UI debezuim все равно пишет "Kafka automatic topic creation is not enabled. See documentation for details on enabling this feature."

10 ответов

26 просмотров

эта (KAFKA_CFG_AUTO_CREATE_TOPICS_ENABL) опция включается на кафке, а не в коннекторе(дебезиуме)

Алексей-Арапов Автор вопроса
Сергей Голод
эта (KAFKA_CFG_AUTO_CREATE_TOPICS_ENABL) опция вкл...

так вот же Использую образ kafka image: docker.io/bitnami/kafka:3.4 с переменной KAFKA_CFG_AUTO_CREATE_TOPICS_ENABLE=true

Алексей Арапов
так вот же Использую образ kafka image: docker.io...

"докажите") что вы эту переменную передаёте в кафку. По ссылке на докер-образ это неочевидно)

Настройка на брокере раз, настройка создания топиков в самом коннекторе - два

Алексей-Арапов Автор вопроса
Сергей Голод
эта (KAFKA_CFG_AUTO_CREATE_TOPICS_ENABL) опция вкл...

Ну я бы приложил скрин в качестве доказательства, но тут нельзя) Сейчас проверил через kafka ui - в настройках брокера стоит auto.create.topics.enable true

Алексей-Арапов Автор вопроса

оба этих условия учтены переменными докера, вроде как

Алексей Арапов
Ну я бы приложил скрин в качестве доказательства, ...

может вы не к той кафке коннектитесь? попробуйте любым другим консьюмером подключиться к ней и проверить будет ли топик создан автоматически

Алексей Арапов
оба этих условия учтены переменными докера, вроде ...

Настройки коннектора не в докере, не путайте с коннектом

Алексей-Арапов Автор вопроса
Dima
Настройки коннектора не в докере, не путайте с кон...

тут не совсем понял, через env докера передаю переменную которая подтягивается в конфиг kafka-connect, или вы про другое?

Алексей Арапов
тут не совсем понял, через env докера передаю пере...

Есть сервак - Кафка-коннект, у него свой конфиг, а есть коннекторы - они ставятся на сервак у них свои конфиги

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Ребят, подскажите, пожалуйста, почему в префиксе к ассетам, которые генерируются через фильтр | theme в шаблоне, стал вдруг появляться index.php? Вот так выглядит ссылка на а...
Виталий
1
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Блин, ребята, сори за тупые вопросы. А можно ли как-то открыть вебапку по нажатию на кнопку в меню(которое появляется слева, команды)?
Artem Stormageddon
3
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Карта сайта