Python 3.x 是否有一个通用的dag/任务可以写入?

Python 3.x 是否有一个通用的dag/任务可以写入?,python-3.x,amazon-web-services,amazon-redshift,airflow,airflow-scheduler,Python 3.x,Amazon Web Services,Amazon Redshift,Airflow,Airflow Scheduler,详细问题:我脑子里有一个场景,想听听专家们的建议! 在附加图像中,第一组图像显示当前工作流。下面是预期的工作流程。由于源数据刷新时间不同,我无法将所有工作流合并到一个dag中 我在想,是否可以创建一个名为generic的dag,并在其他子dag(如模板)中使用单个任务 或者,如何从我的子DAG调用这些通用DAG 正在寻找您的宝贵建议,以便在提取和加载部分需要任何更新时优化工作流程并易于维护。到目前为止,它真的很复杂,因为我需要单独触摸所有4个DAG

详细问题:我脑子里有一个场景,想听听专家们的建议!

在附加图像中,第一组图像显示当前工作流。下面是预期的工作流程。由于源数据刷新时间不同,我无法将所有工作流合并到一个dag中

我在想,是否可以创建一个名为generic的dag,并在其他子dag(如模板)中使用单个任务

或者,如何从我的子DAG调用这些通用DAG

正在寻找您的宝贵建议,以便在提取和加载部分需要任何更新时优化工作流程并易于维护。到目前为止,它真的很复杂,因为我需要单独触摸所有4个DAG