Airflow 即使dag/任务已实际完成,气流也不会更新要完成的dag/任务的进度

Airflow 即使dag/任务已实际完成,气流也不会更新要完成的dag/任务的进度,airflow,apache-airflow,airflow-scheduler,Airflow,Apache Airflow,Airflow Scheduler,我已设置气流以分布式模式运行,有10个工作节点。我试图通过触发一个测试dag来访问并行工作负载的性能,该测试dag只包含一个任务,该任务只休眠3秒钟,然后就出来了 我使用命令触发了dag 气流回填试验-s 2015-06-20-e 2015-07-10 调度程序并行启动作业/DAG,我经常看到以下o/p: [2017-06-27 09:52:29611]{models.py:4024}信息-正在更新考虑1个任务的状态 [2017-06-27 09:52:29647]{models.py:4024

我已设置气流以分布式模式运行,有10个工作节点。我试图通过触发一个测试dag来访问并行工作负载的性能,该测试dag只包含一个任务,该任务只休眠3秒钟,然后就出来了

我使用命令触发了dag 气流回填试验-s 2015-06-20-e 2015-07-10

调度程序并行启动作业/DAG,我经常看到以下o/p: [2017-06-27 09:52:29611]{models.py:4024}信息-正在更新考虑1个任务的状态 [2017-06-27 09:52:29647]{models.py:4024}信息-正在更新考虑1个任务的状态 [2017-06-27 09:52:29664]{jobs.py:1983}INFO-[backfill progress]|完成了21个任务中的19个任务等待:0 |成功:19 |启动:2 |失败:0 |跳过:0 |死锁:0 |未准备:0

这里,kicked_off:2表示两个任务被启动,但当我看到dag运行状态的UI时,我看到两个dag实例正在运行。当我查看相应的任务实例日志时,它表示任务已成功完成,但上面的消息仍无限显示在命令提示符中

[2017-06-27 09:52:29611]{models.py:4024}信息-正在更新考虑1个任务的状态 [2017-06-27 09:52:29647]{models.py:4024}信息-正在更新考虑1个任务的状态 [2017-06-27 09:52:29664]{jobs.py:1983}INFO-[backfill progress]|完成了21个任务中的19个任务等待:0 |成功:19 |启动:2 |失败:0 |跳过:0 |死锁:0 |未准备:0

是否工作人员正在发送的消息被删除,因此状态没有更新

airflow.cfg文件中是否有任何参数允许在其他工作节点上重试此类失败的作业,而不是内敛地等待负责执行aobe失败任务的工作节点的消息