airflow

发布时间 2023-11-27 22:43:41作者: fzy_uni
what

Apache Airflow 是一个提供基于DAG 有向无环图来编排工作流的、可视化的分布式
任务调度平台,与Oozie、Azkaban 等任务流调度平台类似。Airflow 在2014 年由
Airbnb 发起,2016 年3 月进入Apache 基金会,在2019 年1 月成为顶级项目。Airflow
采用Python 语言编写,提供可编程方式定义DAG 工作流,可以定义一组有依赖的任务,
按照依赖依次执行, 实现任务管理、调度、监控功能。