184 похожих чатов

У меня возникал проблема, вот мой xml файл с конфигурации

моего кликхауса
<clickhouse>
<named_collections>
<mysql>
<user><some_password></user>
<password><some_password></password>
<host><mysql host></host>
<port><mysql port></port>
<database><some_db></database>
<connection_pool_size>8</connection_pool_size>
<on_duplicate_clause>1</on_duplicate_clause>
<replace_query>1</replace_query>
</mysql>
<kafka>
<kafka_broker_list>broker:29092</kafka_broker_list>
<kafka_topic_list>stonly.docker.clickhouseStats.stats</kafka_topic_list>
<kafka_group_name>clickhouse-consumer-group-docker</kafka_group_name>
</kafka>
</named_collections>
</clickhouse>


Вот моя таблица кафки:
CREATE TABLE StonlyStat.kafkaStats on cluster '{cluster}'(
all String
) ENGINE = Kafka(kafka)
SETTINGS
kafka_format = 'JSONAsString',
kafka_num_consumers = 1,
kafka_max_block_size = 1048576,
kafka_skip_broken_messages = 0;

И я не понимаю как моя таблица kafkaStats понимает с какого топика, от какого брокера и с какой групы читать сообщение с Кафки ?

А теперь посмотри как у нас сделана конфигурации уже не локально, а на тестетовом окружение:
<clickhouse>
<named_collections>
<mysql>
<user><some_password></user>
<password><some_password></password>
<host><mysql host></host>
<port><mysql port></port>
<database><some_db></database>
<connection_pool_size>8</connection_pool_size>
<on_duplicate_clause>1</on_duplicate_clause>
<replace_query>1</replace_query>
</mysql>
<kafka>
<kafka_broker_list>broker:29092</kafka_broker_list>
<kafka_topic_list>stonly.jenkins-test-env.clickhouseStats.stats</kafka_topic_list>
<kafka_group_name>clickhouse-consumer-group-jenkins-test-env</kafka_group_name>
</kafka>
</named_collections>
</clickhouse>

И мне нужно сделать все тоже самое только для моей новой таблицы при этом не хардкодить следующие данные:
kafka_broker_list = 'broker:29092',
kafka_topic_list = 'new_topic',
kafka_group_name = 'clickhouse-consumer-group-docker',

Я хочу что бы kafka_broker_list, kafka_topic_list, kafka_group_name подставлялись динамически в зависимости от окружения в котором запускается мое приложение

1 ответов

17 просмотров

Но зачем менять названия топиков и группу в зависимости от окружения, почему они не могут быть одинаковыми?

Похожие вопросы

Обсуждают сегодня

#include <stdio.h> #include <stdlib.h> #include <time.h> void mass_first_generate(int mass[5][7]) {     for (int N = 0; N < 5; N++) {         for (int A = 0; A < 7; A++) {   ...
Чувак
6
https://www.linkedin.com/posts/ugama-benedicta-kelechi-codergirl-103041300_mobiledevelopment-fluttertraining-handsonlearning-activity-7263445699227254784-IdHB?utm_source=share...
CoderGirl
16
Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
Ну вот просто даже давайте вот как. Какой нибудь конкретный кейс, можете в пример привести, где бч работает и приносит прикладную пользу, а не просто что бы было? Не крипту.
Alexander Andreev
22
объясните пожалуйста, почему функция не работает должным образом? вроде должно брать активное окно сравнивать его размер с размером экрана, и если есть совпадение = true прове...
JF
12
Гляньте, че бывает: Сегодня по одному проекту одной вебстудии делал проект небольшой, на их хостинге. На Modx revo. В определенный момент , работая в админке, вдруг перестал р...
Artem
7
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
12
> Копаем глубже > Следующий момент был, когда я спросил его, знает ли он JavaScript. Он ответил, что его учили работать с C#. Я тоже в университете писал на C#, но даже там мн...
Oleg Volkov
4
И никого не интересует какие пакеты кто использует. ((% Заходишь на сайт симфони и видишь поддержку Украины - по законам РФ это ж экстремизм. Только никто не отказывается от с...
Am Ambrion
11
Карта сайта