Airflow 是否有方法查看所有气流工人的列表?
不熟悉气流,所以如果这个问题没有真正意义,请道歉。在Web服务器UI中是否有一个可以看到所有正在运行的工作人员列表的命令或位置?此外,如果芹菜工作者节点未明确使用Airflow 是否有方法查看所有气流工人的列表?,airflow,airflow-worker,Airflow,Airflow Worker,不熟悉气流,所以如果这个问题没有真正意义,请道歉。在Web服务器UI中是否有一个可以看到所有正在运行的工作人员列表的命令或位置?此外,如果芹菜工作者节点未明确使用气流工作者启动,是否存在使用Web服务器或调度程序初始化的“默认”工作者?对问题的这一部分进行了规定: 此外,如果芹菜工作节点没有使用airflow worker显式启动,是否存在使用webserver或scheduler初始化的“默认”工作节点 请看下面的图片 使用芹菜需要一些配置更改。如果您尚未将气流配置为使用芹菜,则即使启动芹菜工
气流工作者启动,是否存在使用Web服务器或调度程序初始化的“默认”工作者?对问题的这一部分进行了规定:
此外,如果芹菜工作节点没有使用airflow worker显式启动,是否存在使用webserver或scheduler初始化的“默认”工作节点
请看下面的图片
使用芹菜需要一些配置更改。如果您尚未将气流配置为使用芹菜,则即使启动芹菜工人,工人也不会执行任何任务
相反,如果您已将airflow配置为使用芹菜,并且尚未启动任何芹菜工人,则集群将不会执行单个任务
如果您使用的是SequentialExecutor(默认)或LocalExecutor(需要配置),那么对于这两个执行器,任务都由调度程序执行,并且不使用芹菜工人(如果您旋转了一些,则他们不会执行任何任务)
关于这一点:
是否有方法查看所有气流工人的列表
如果你有,那么你可以跑去看监控芹菜花的工人。在气流>=2.0.0中,flower启动时带有气流芹菜花调节您问题的这一部分:
此外,如果芹菜工作节点没有使用airflow worker显式启动,是否存在使用webserver或scheduler初始化的“默认”工作节点
请看下面的图片
使用芹菜需要一些配置更改。如果您尚未将气流配置为使用芹菜,则即使启动芹菜工人,工人也不会执行任何任务
相反,如果您已将airflow配置为使用芹菜,并且尚未启动任何芹菜工人,则集群将不会执行单个任务
如果您使用的是SequentialExecutor(默认)或LocalExecutor(需要配置),那么对于这两个执行器,任务都由调度程序执行,并且不使用芹菜工人(如果您旋转了一些,则他们不会执行任何任务)
关于这一点:
是否有方法查看所有气流工人的列表
如果你有,那么你可以跑去看监控芹菜花的工人。在airflow>=2.0.0中,flower是通过airflow芹菜花启动的
如果您使用芹菜,您应该设置一个flower ui,允许您监视所有芹菜工作者及其同步到的redis/rabbit队列。如果您使用芹菜,您应该设置一个flower ui,允许您监视所有芹菜工作者以及它们同步到的redis/rabbit队列。