Airflow 失败后重试了气流任务,尽管重试次数=0

Airflow 失败后重试了气流任务,尽管重试次数=0,airflow,airflow-scheduler,google-cloud-composer,Airflow,Airflow Scheduler,Google Cloud Composer,我有一个在Cloud Composer上运行的气流环境(3n1-standard-1节点;图像版本:Composer-1.4.0-Airflow-1.10.0;配置覆盖:核心catchup\u默认值=False;PyPI包:kubernetes==8.0.1) 在DAG运行期间,一些任务(所有GKEPodOperators)由于气流工作者吊舱逐出而失败。所有这些任务都设置为retries=0。其中一人被重新询问并重试。当任务设置为0次重试时,为什么会发生这种情况?为什么它只会发生在其中一个任务上

我有一个在Cloud Composer上运行的气流环境(3
n1-standard-1
节点;图像版本:
Composer-1.4.0-Airflow-1.10.0
;配置覆盖:核心
catchup\u默认值=False
;PyPI包:
kubernetes==8.0.1

在DAG运行期间,一些任务(所有GKEPodOperators)由于气流工作者吊舱逐出而失败。所有这些任务都设置为
retries=0
。其中一人被重新询问并重试。当任务设置为0次重试时,为什么会发生这种情况?为什么它只会发生在其中一个任务上?

气流工作者吊舱驱逐”意味着一些吊舱需要更多的资源,因此一些吊舱被驱逐

要解决此问题,您可以使用更大的机器类型或尝试减少DAG内存消耗


查看his以获得更好的视图。

请添加您的DAG。无法帮助查看代码。