我们可以根据hadoop应用程序的类型(MR、SPARK)将其分配到公平调度程序队列中吗?

我们可以根据hadoop应用程序的类型(MR、SPARK)将其分配到公平调度程序队列中吗?,hadoop,mapreduce,apache-spark,Hadoop,Mapreduce,Apache Spark,fair scheduler是否支持基于应用类型的队列分配? 与所有SPARK作业一样,SPARK\u队列下有SPARK\u作业,MR作业下有MR\u队列。在提交/运行SPARK作业时,可以将Thread队列指定为--Queue命令行参数、SPARK.Thread.Queue SPARK配置参数或SPARK\u Thread\u队列环境变量。是在配置工作中定义队列。但如果这是一个共享集群呢。我们无法从用户端控制队列设置,他们可以提交到任何队列。我们在fair scheduler中是否有任何选项,

fair scheduler是否支持基于应用类型的队列分配?
与所有SPARK作业一样,SPARK\u队列下有SPARK\u作业,MR作业下有MR\u队列。

在提交/运行SPARK作业时,可以将Thread队列指定为--Queue命令行参数、SPARK.Thread.Queue SPARK配置参数或SPARK\u Thread\u队列环境变量。

是在配置工作中定义队列。但如果这是一个共享集群呢。我们无法从用户端控制队列设置,他们可以提交到任何队列。我们在fair scheduler中是否有任何选项,它根据应用程序类型重定向应用程序。而不是用户定义他们的作业应该进入哪个队列。