Привет! В наследство достался кластер kafka c zookeeper

,версия 3.2.0, 3 ноды.
Стоит задача разово среплицировать с него данные в новый кластер,но уже с kraft.

С kafka практически не работал, посоветуйте,пожалуйста,инструмент,который подойдет для решения задачи?

16 ответов

30 просмотров

зачем вам крафт?

ktc- Автор вопроса
Старый Хрыч
зачем вам крафт?

скорее это требование заказчика

заказчик вкурсе что все скрипты для регена в случае сбоя ещё под зукипер?

mirror-maker2

Сергей Голод
mirror-maker2

вроде из зоокипера в крафт и наоборот нельзя

es]x
вроде из зоокипера в крафт и наоборот нельзя

да и главное нахрена, крафт ещё сырой и не для прода

ktc- Автор вопроса
Старый Хрыч
заказчик вкурсе что все скрипты для регена в случа...

пока вот как раз собираю информацию, целесообразно ли вообще

es]x
вроде из зоокипера в крафт и наоборот нельзя

с чего бы? там же просто содержимое топиков реплицируется по стандартному протоколу работы с брокером. ZK - это просто хранилище мета-данных для кафки

ktc
пока вот как раз собираю информацию, целесообразно...

крафт целесообразно только на новые проекты, на старые до 4.0 там нечего делать

es]x
крафт целесообразно только на новые проекты, на ст...

на крафт до 3,7 версии вообще делать нечего, в jbod не умеет. смерть носителя равно смерть окончателльная для брокера, отвал маунта по какой либо причине у брокера, - ебля и проблемы

ktc
скорее это требование заказчика

а заказчик это кто относительно вас?

es]x
спросите у производителя)

я решил не спрашивать), а просто поднять кафку с ZK и рядом mm2 из неё в кафку с kraft. Как и ожидалось - всё прекрасно работает, как и ожидалось. мм2 работает с брокерами, а не с ZK @killthecult, можете спокойно поднимать mm2 и лить всё в соседний кластер. Единственное - полиси поменять, чтобы имена топиков были без префиксов в новом кластере. Выше обсуждалось как это сделать в mm2

Igor
JBOD уже в 3.6 завезут

крафт в 3,0 завезли, а работать хть как то он в 3,4 только начал

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Ребят, подскажите, пожалуйста, почему в префиксе к ассетам, которые генерируются через фильтр | theme в шаблоне, стал вдруг появляться index.php? Вот так выглядит ссылка на а...
Виталий
1
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Блин, ребята, сори за тупые вопросы. А можно ли как-то открыть вебапку по нажатию на кнопку в меню(которое появляется слева, команды)?
Artem Stormageddon
3
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Карта сайта