ETL

Airflow - это ПО для ETL процессов. В нём можно делать сложные цепочки из разных задач, которые выполняются последовательно при определённых условиях. Этот инструмент часто используется инженерами по данным для автоматизации процессов внутри хранилищ данных.