Airflow 当每dag的最大活动运行次数设置得太高且吞吐量太高时,气流调度器将停止调度任务

Airflow 当每dag的最大活动运行次数设置得太高且吞吐量太高时,气流调度器将停止调度任务,airflow,airflow-scheduler,Airflow,Airflow Scheduler,在这一点上,我已经非常彻底地测试过了。我已经将自己的工作人员数量扩大到了一个荒谬的数字,减少到了一个更小的工作人员数量,拥有更多的RAM和CPU,将不同的配置设置回默认值,等等。唯一阻止安排任务的方法是将max\u active\u runs\u per\u dag设置为64以上的值,然后调度同一DAG的64次执行。这也发生在一个相当健壮的调度程序实例上。4芯,16GB内存,使用2个线程 谢谢

在这一点上,我已经非常彻底地测试过了。我已经将自己的工作人员数量扩大到了一个荒谬的数字,减少到了一个更小的工作人员数量,拥有更多的RAM和CPU,将不同的配置设置回默认值,等等。唯一阻止安排任务的方法是将
max\u active\u runs\u per\u dag
设置为64以上的值,然后调度同一DAG的64次执行。这也发生在一个相当健壮的调度程序实例上。4芯,16GB内存,使用2个线程

谢谢