Я в прошлом году посмотрел на Apache Flink. Я пытался

Question

Я в прошлом году посмотрел на Apache Flink. Я пытался

даже выучить скалу, но мне стало ужасно дурно. Потом я попытался посмотреть на Apache Storm и там всё точно такое же.
Есть ли в мире какой-то простой потоковый процессинг, которым я смогу подсоединиться к RabbitMQ, для 97%?

#erlang #it #programming #russian

0

18.08.2024

12 ответов

15 просмотров

Олексій Клюєв

Igor Karymov
Не знаю чем вам не защёл Flink. Если не хочется в ...

Мне когда-то тоже говорили, что Cassandra это просто )

0

24 дня назад

Matwey Kornilov Автор вопроса

Igor Karymov
Не знаю чем вам не защёл Flink. Если не хочется в ...

Не зашёл скорее по совокупности... Я его запускал чётко по туториалу, и он то не запускался, то не останавливался, когда в стендэлоне обработал весь входной поток, а просто висел. Какое-то ощущение чего-то сырого. Про машинерию я согласен и так честно и написал с самого начала, что сам я делать это не желаю, потому-что там ошибиться можно много где, а в 3% настоящих я не вхожу.

0

24 дня назад

Igor Karymov

Matwey Kornilov
Не зашёл скорее по совокупности... Я его запускал ...

Flink это наверное самое зрелое решение которое есть. Мы у себя крутим в проде зеро иссуес. У нескольких контор из бигтеха на нём тоже платформа данных построена. Может быть тяжеловато наверное если с jvm никогда до этого не сталкивались.

0

24 дня назад

Олексій Клюєв

Matwey Kornilov
Не зашёл скорее по совокупности... Я его запускал ...

Небыло такого

0

24 дня назад

Д. П.

Ruby прекрасно работает с кроликом, либы хорошие, я проверял.

0

24 дня назад

Олексій Клюєв

Д. П.
Ruby прекрасно работает с кроликом, либы хорошие, ...

В ерл вообще нативные

0

24 дня назад

Igor Karymov

Д. П.
Ruby прекрасно работает с кроликом, либы хорошие, ...

У меня как то уверенно потоковая обработка данных ассоциируется с большой нагрузкой и пропускной способностью. А руби наоборот не ассоциируется с этими терминами 😀

0

24 дня назад

Д. П.

Igor Karymov
У меня как то уверенно потоковая обработка данных ...

если надо мат. модели считать и хэши брутфорсить, то согласен, а так я запускал на старом нетбуке два процесса руби (по числу ядер) и они прекрасно обслуживали несложные запросы в пределах пропускной способности 100мбит сетки - авторизация, аутентификация jwt-токенами и логирование действий

0

24 дня назад

Matwey Kornilov Автор вопроса

Igor Karymov
У меня как то уверенно потоковая обработка данных ...

Самое смешное, что мне не надо большой нагрузки и отказоустойчивости, мне надо чтобы было согласованно на выходе. Но записать весь поток в базу данных и каждый раз пересчитывать результат с самого начала я тоже не могу, потому-что отдельных единичных операций обработки мало, но они вычислительно ёмкие.

0

24 дня назад

Д. П.

Matwey Kornilov
Самое смешное, что мне не надо большой нагрузки и ...

я там увидел про 97% и поэтому написал за руби.

0

24 дня назад

Matwey Kornilov Автор вопроса

Д. П.
я там увидел про 97% и поэтому написал за руби.

Да, 97% это свежий местный мем.

0

24 дня назад

Igor Karymov · Accepted Answer

Не знаю чем вам не защёл Flink. Если не хочется в скалу или джаву, там есть Flink SQL который закрывает из коробки многие юзкейсы, по крайней мере несколько стримов в один точно получится поджойнить. Ну и это на самом деле не такая простая задача, по капотом там много машинерии, так что на колене я бы такое не стал писать.

185 похожих чатов

Я в прошлом году посмотрел на Apache Flink. Я пытался

12 ответов

Похожие вопросы