Workflow 我们可以限制Apache中任何时候运行的DAG的数量吗

Workflow 我们可以限制Apache中任何时候运行的DAG的数量吗,workflow,airflow,directed-acyclic-graphs,Workflow,Airflow,Directed Acyclic Graphs,我们可以限制Apache中任何时候运行的DAG的数量吗 我们的环境资源有限。是否有一种配置来限制在某一时间点整体气流中运行的DAG数量 最大活动运行参数限制在DAG内运行 是否可能,如果一个DAG正在运行,所有其他计划的DAG应该等待第一个DAG完成,然后依次触发自身?通过在aiffort.cfg中设置,可以限制允许并行运行的最大任务总数(非DAG)。然后,通过设置,可以指定DAG可以并行运行多少任务 例如,设置parallelism=8和dag_concurrency=1将在任何时候为您提供最

我们可以限制Apache中任何时候运行的DAG的数量吗

我们的环境资源有限。是否有一种配置来限制在某一时间点整体气流中运行的DAG数量

最大活动运行参数限制在DAG内运行

是否可能,如果一个DAG正在运行,所有其他计划的DAG应该等待第一个DAG完成,然后依次触发自身?

通过在
aiffort.cfg
中设置,可以限制允许并行运行的最大任务总数(非DAG)。然后,通过设置,可以指定DAG可以并行运行多少任务


例如,设置
parallelism=8
dag_concurrency=1
将在任何时候为您提供最多8个并行运行的dag(每个dag运行1个任务)。

使用本地执行器:我已经定义了并行度=8和dag_concurrency=2,我希望4个dag以每个dag 2个任务并行运行。但是在UI中,我看到每个DAG有16个任务处于运行阶段。我的理解有问题吗?