184 похожих чатов

Делаю по мануалу https://clickhouse.yandex/docs/en/table_engines/kafka/ . Сообщения в кафку уходят, clickhouse

их не видит (из доки SELECT * FROM queue LIMIT 5;).

В логах CH:
2018.03.07 20:08:15.894921 [ 3 ] <Trace> StorageKafka (queue): Committing 0 messages
Если к кафке подключиться, например, kafkacat, то сообщения видны.

Куда копать?

2 ответов

9 просмотров

+ таже ботва, не разбирался, но плюсую

Только вчера сам пробовал. Похоже, что оффсет сдвигается после запроса. Если сделать select из Kafka engine, показывает только новые сообщения. Если после завешения запроса напродюсить сообщений - вычитает их при следующем селекте. BTW, @milovidov_an, можно ли предусмотреть вычитывание данных из топика при указании новой consumer group с первых, а не с новых, как сейчас ?

Похожие вопросы

Обсуждают сегодня

Какой-то там пердун в 90-х решил, что есть какая-то разная типизация. Кого вообще это волнует?
КТ315
49
void terminal_scroll() { memmove(terminal_buffer, terminal_buffer + VGA_WIDTH, buffer_size - VGA_WIDTH); memset(terminal_buffer + buffer_size - VGA_WIDTH, 0, VGA_WIDTH); ...
Егор
47
Всем привет! Подскажите, пожалуйста, в чем ошибка? Настраиваю подключение к MySQL. Либы лежат рядом с exe. Все как по "учебнику"
Евгений
16
А можете как-то проверить меня по знаниям по ассемблеру?
A A
132
Здравствуйте! У меня появилась возможность купить книгу "Изучай Haskell во имя добра!". Но я где-то слышал, что эта книга устарела. Насколько это правда??
E
22
Здравствуйте! Я вот на stepic решаю задачи на хаскеле https://stepik.org/lesson/8443/step/8?unit=1578 мой код import Data.List (isInfixOf) removing :: String -> [String] ->...
E
10
Камрады, кто тесно работал с vtv, хотел уточнить. Ширина column задаётся жёстко на этапе создания дерева или можно в рантайме ее менять программно (не мышкой)?
Ed Doc
10
да ладно ... что там неочевидного ? глянуть в исх-ки датасета и/или кверика чтобы понять в каком месте и как выполняется обращения к св-вам blablaSQL - минутное дело, даже е...
Сергей
7
Здесь для arm кто-нибудь кодит ?
Nothing
52
Всем привет, у меня есть сервер принимающий входящие HTTP подключения, как проверить, что подключение было через прокси или нет, есть какие то поля в заголовках по которым мо...
Кибер Бомж
8
Карта сайта