去年下半年,我一直在搞模型工程化的问题,最终呢选择了airflow作为模型调度的工具,中间遇到了很多的问题...
Airflow常见名词解释——DAG 代表一个工作流,一个 DAG 中包含多个 Task,多个 Task 组成一个有向无环图。DAG 可以配置调度时间。如下图是一个 DAG,其中有 6 个 Task 按顺序执行。 DAG 通过 Python 定义,如下: from builtins import range from datetime import timedelta import airflow from airflow.models ...