Автоматизация
Ну вот представь что у тебя есть какая-то цепочка преобразования данных и некоторые шаги в ней могут выполняться длительное время, и могут успешно выполнить я, а могут и нет, так вот чтобы вручную не отлавливать это (когда надо запустить следующее звено и выполнено ли предыдущее) и делают пайплайны. Они есть и в sklearn и airflow и много ещё где, в том числе и с графическим интерфейсом отслеживания выполнения задач.
Обсуждают сегодня