Меня тут разработчик вопросом мучает, а я никогда так глубоко

не вникал. Он спрашивает, что будет если он в timestamp продюсером будет указывать далекое будущее - означает ли это что он таким образом сможет забить наглухо сторадж брокера, так как ретеншн по времени отрабатывать не будет? Я не нашел бегло подтверждения тому, что кафка примет его фейковый timestamp за основу рассчета ретеншена, но я уверен, что кафка не "тупая" и не должна позволять проворачивать такие финты. Где истина?

6 ответов

23 просмотра

Так ретеншн вычисляется по таймстампу из метаданных. А в сообщении он хоть миллионный год может указать, это лишь часть сообщения

ты не можешь сам руками указать метку времени

Ivgenich- Автор вопроса
Максим Муртазаев
Так ретеншн вычисляется по таймстампу из метаданны...

Ну вот я ему так и объяснил в целом, что считается по мете индекса, а не по тому что в сообщении.

Ivgenich- Автор вопроса
Максим Муртазаев
Так ретеншн вычисляется по таймстампу из метаданны...

Хм, кажется все же можно передать в мету любой timestamp, но все же это кажется не влияет на ретеншн. Потому что: Retention by time is performed by examining the last modified time on each log segment file on disk.

Ivgenich
Хм, кажется все же можно передать в мету любой tim...

повлияет, ретеншн отрабатывает на основании самого большого timestamp сообщения, были у нас такие случаи и не один раз, ретеншн не отрабатывал из-за некорректного timestamp в сообщениях potential breaking changes in 0.10.1.0 the log retention time is no longer based on last modified time of the log segments. Instead it will be based on the largest timestamp of the messages in a log segment

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Ребят, подскажите, пожалуйста, почему в префиксе к ассетам, которые генерируются через фильтр | theme в шаблоне, стал вдруг появляться index.php? Вот так выглядит ссылка на а...
Виталий
1
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
Блин, ребята, сори за тупые вопросы. А можно ли как-то открыть вебапку по нажатию на кнопку в меню(которое появляется слева, команды)?
Artem Stormageddon
3
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Карта сайта