ними простые трансформации (по типу плюсовать значения двух полей, или заменить определённые символы в поле) и полученные данные записать в файл.
Основная сложность что сами SQL запросы к базе, и правила трансформации нужно хранить вне кода в виде внешней конфигурации.
Можете посоветовать какое готовое клауд агностик решение можно использовать для этого, если такое существует? Спасибо
Мне кажется, погуглить ETL тулзы и посмотреть, кто больше подходит.
Не могу найти с внешней конфигурацией, все с программной 🧐
Ну покурите Camel, мне кажется, он должен уметь что-то подобное. Грузить и файлы, и конфиги из внешних файлов, мне кажется. Скрипты - точно, а вот преобразования - не уверен.
Обсуждают сегодня