Для работы сервиса Managed Airflow вам потребуются:
Managed Airflow позволяет разворачивать инстанс Airflow. С помощью Airflow вы можете планировать и контролировать сложные рабочие процессы, объединять задачи в цепочки (пайплайны) и автоматизировать их.
При создании инстанса можно выбрать один из образов:
Стандартный — включает дополнительные библиотеки и компоненты, более универсальный вариант для сложных задач.
Облегченный — включает только самые необходимые копмоненты, более быстрый и защищенный вариант для тестирования и небольших задач.
Все процессы в Managed Airflow описываются в DAG-файлах на языке Python.
DAG (Directed Acyclic Graph) — это схема (граф), которая описывает порядок выполнения задач (tasks) и зависимости между ними.