基于开源项目Apache Airflow,是一个以编程方式编写,安排和监视工作流的平台。工作流定义为代码,它们变得更具可维护性,可版本化,可测试性和协作性。使用Airflow将工作流编写为任务的有向无环图(DAG), Airflow调度程序在遵循指定的依赖关系的同时,在一组工作线程上执行任务。用户界面使查看生产中正在运行的任务,监视进度以及更加方便进行故障排除
评论