Товарищи, мне отвели +- 2 недели на изучение Apache Flink,

а затем надо будет показать себя крутым на собеседовании в проект, где это используется. Можете поделиться, пожалуйста, из своего опыта какими-нибудь вариантами использования, способами работы с ним, курьёзными случаями при использовании, вопросами, которые могут спросить о нём на собесе? 🙏
Это мне для лучшего усвоения теоретического материала

6 ответов

7 просмотров

Две недели много, за это время можно доку наизусть выучить. Поднять кубер, сделать пайплайн. Реальные проблемы которые встретишь спросишь в чате

Если теор.материал у тебя уже есть, то попробуй вот так структурировать подготовку: 1. Stateless processing - это фильтр, простейшие трансформации 1 рекорда. Windows тут не нужнв 2. Stateful - агрегации на окошках. Тут постарайся не утонуть в кучах вариаций этих окошек 3. Stateful - джойны на table api 4. Stateful хрень на более низком уровне - data stream api https://nightlies.apache.org/flink/flink-docs-release-1.17/docs/dev/datastream/operators/overview/ У них еще есть хандс-он прямо из доки https://nightlies.apache.org/flink/flink-docs-release-1.17/docs/learn-flink/overview/

Самые типичные боли - изменения структуры всяких стейтов. Особенно когда стейты разрастаются до 1ТБ

Ruslan-Krivoshein Автор вопроса
Ruslan Krivoshein
А когда их менять требуется?

Например, когда вместо трех сурсов надо теперь джойнить четыре Или в серединку между трансформациями воткнуть еще одну Почитай про https://nightlies.apache.org/flink/flink-docs-master/docs/dev/datastream/fault-tolerance/serialization/schema_evolution/ Software is never done

Похожие вопросы

Обсуждают сегодня

Добрый день, не подскажите, если в OC-V3 поменять страндартную директорию /storage/ на /storage2/ - не будет сильно много проблем ?
Max Dubovsky
32
'frakturBold' => ['𝖆', '𝖇', '𝖈', '𝖉', '𝖊', '𝖋', '𝖌', '𝖍', '𝖎', '𝖏', '𝖐', '𝖑', '𝖒', '𝖓', '𝖔', '𝖕', '𝖖', '𝖗', '𝖘', '𝖙', '𝖚', '𝖛', '𝖜', '𝖝', '𝖞', '𝖟', '𝕬', '𝕭', '𝕮', '𝕯'...
Roma
4
А сколько часов мак держит зарядку в рабочем режиме? Например мой Redmi Mac (просто наклейка от айфона осталась, налепил) по началу держал часов 5 с парой открытых штормов и ...
Ross
7
Каким то образом можно определить ширину экрана пользователя перед загрузкой partial-а? Надо рассчитать ширину кадров слайдера для ресайза картинок для container-fluid.
Point 111
22
Ребят, а вот такой вопрос: если я владелец бота анонимного чата, в котором, например, имеются подписки, используя какую-нибудь ЮКассу (или тому подобное, в общем с налогами, в...
Eugene Неелов
8
Гнева и тупости пост. Как блять можно работать с маркетологами? Их в детстве всех родители случайно цепляли об дверные откосы? Поступила таска, на сайте "лишний счетчик Google...
Igor
4
а у тг (бот) апи вообще есть статусная страница, кстати?
e\\/gen
5
Вообще сейчас эти все провайдеры облаков оборзели. Если тебе нужно 4 ядра и 4 гб., хер где такую конфигурацию найдешь. Суют тебе сразу либо 8гб. либоа сразу 16 гб., они мне на...
Igor
4
Всем привет. А никто не в курсе у бота может быть заблокированна возможность принимать звезды? На одном боте вызываю sendInvoice с нужными параметрами все ок, на втором дела...
John Doe
2
За последнее время были какие-то изменения в работе ботов, принимающие заявки в каналы? Давно делал бота, сейчас открыл логи, а там сплошь Forbidden: bot can't initiate conve...
Lencore
1
Карта сайта