airflow-operator 可以管理airflow 的kuberntes 自定义controller && crd 使用airflow-operator 我们可以让airflow 可以很方便的运行在k8s集群环境中,当前还在开发中 主要分为两部分:airflowbbase && airfowcluster 自定义资源。 可以用来做以下事情: 创建&&管理airflow 部署的k8s 资源 更新关联的k8s资源,当airflowba...
Airflow:为TriggerDagRunOperator设置自定义run_id Airflow是一个开源的工作流编排和调度平台,用于构建、调度和监控数据处理流程。它提供了一个可视化的界面来管理和监控各种任务,如数据传输、ETL流程和机器学习模型训练等。 在Airflow中,TriggerDagRunOperator是用于触发DAG运行的操作符。它可以通过设置自定义的run_i...
使用airflow-operator 我们可以让airflow 可以很方便的运行在k8s集群环境中,当前还在开发中 主要分为两部分:airflowbbase && airfowcluster 自定义资源。 可以用来做以下事情: 创建&&管理airflow 部署的k8s 资源 更新关联的k8s资源,当airflowbase&& airflowcluster 信息变更的时候 恢复删除的k8s 资源 支持创建不同的...
因为"run_id“是在TriggerDagOperator的execute方法中生成的，所以不能立即对它执行此操作。但是，您可以...