У меня тут задача: 1. По графику запускать импорт данных скриптом. 2.

Запускать тесты на импортированных данных.
3. а. Fail тестов -> отчёт в SNS
3. b. Success тестов -> отчёт в SNS (?)
4. При 3.b. запускать другой импорт данных.

Оба импорта проходят за ~5 минут.

Думаю, как сделать.

Варианты:

1. CloudWatch Events Rule по графику -> Lambda импорт -> SNS -> тесты -> SNS -> On Success Lambda import #2

2. Комбинация AWS Batch, AWS Step Functions, ... ?

AWS Batch для быстрых заданий выходит, кажется, очень дорого, даже со спотом. 7 запусков hello world на спотах обошлись мне в $0,13
И непонятно, может ли SNS запускать Batch Jobs? И если нет, это значит Step Functions?

сегодня смотрел на step functions вызывать разные лямбды можно взависимости от результата другой лямбды лучше подходит step functions а если можно разбить импорт на несколько обработчиков то есть параллельная обработка - https://stackoverflow.com/questions/54105792/parallel-states-merge-the-output-in-step-function

Batch это бесплатный оркестратор, который использует бесплатный ecs для запуска контейнеров на платном ec2. Ec2 практически всегда дешевле lambda при сравнении в лоб. Мне больше нравится lambda + step function. Из плюсов то что падение лямбды будет автоматически обработано step function. Event rule хороший вариант и может дёргать lambda.

Вообще codepipeline и code build напрашиваются

Можно ещё как вариант вместо step function сделать несколько sqs топиков.

Вопрос - в чём преимущество по сравнению с первым вариантом?