Airflow:Python工作流管理利器

ApacheAirflow是一个用于编排复杂计算工作流和数据处理流水线的开源工具。 如果您发现自己运行的是执行时间超长的cron脚本任务,或者是大数据的批处理任务,Airflow 可能是能帮助您解决目前困境的神器。本文将为那些想要寻找新的工具或者说不知道有这款工具的同学了解Airflow 编写工作线提供入门教程。Airflow工作流设计称为有向非循环图(DAG)。这意味着,在编写工作流时,您应该考虑如何将