Hadoop作业调度查询

Hadoop作业调度查询,hadoop,job-scheduling,Hadoop,Job Scheduling,我是Hadoop的初学者 据我所知,Hadoop框架以FIFO顺序默认调度运行作业 有没有办法告诉框架在特定时间运行作业 i、 e是否有任何方法可以配置为每天下午3点这样运行作业 非常感谢您在这方面的任何意见 谢谢,R从外部java调度框架(如Quartz)调用作业怎么样?然后可以根据需要运行作业。从外部java调度框架(如Quartz)调用作业怎么样?然后你可以按照你的要求运行这个工作。 < P>你可以考虑使用OZIE。除其他事项外,它还允许: 执行频率:Oozie工作流规范支持两种数据 和时

我是Hadoop的初学者

据我所知,Hadoop框架以FIFO顺序默认调度运行作业

有没有办法告诉框架在特定时间运行作业

i、 e是否有任何方法可以配置为每天下午3点这样运行作业

非常感谢您在这方面的任何意见


谢谢,R

从外部java调度框架(如Quartz)调用作业怎么样?然后可以根据需要运行作业。

从外部java调度框架(如Quartz)调用作业怎么样?然后你可以按照你的要求运行这个工作。

< P>你可以考虑使用OZIE。除其他事项外,它还允许:

执行频率:Oozie工作流规范支持两种数据 和时间触发器。用户可以指定执行频率并可以等待 用于数据到达触发工作流中的操作


它独立于任何其他Hadoop调度器,应该与它们中的任何一个一起工作,所以可能在Hadoop配置中没有什么会改变。

< P>您可以考虑使用OOZIE。除其他事项外,它还允许:

执行频率:Oozie工作流规范支持两种数据 和时间触发器。用户可以指定执行频率并可以等待 用于数据到达触发工作流中的操作


它独立于任何其他Hadoop调度程序,并且应该与它们中的任何一个一起工作,因此Hadoop配置中可能不会有任何更改。

让脚本执行Hadoop作业,然后在指定的时间使用at命令执行如何。如果希望作业定期运行,您可以设置一个cron作业来执行您的脚本。

让一个脚本来执行Hadoop作业,然后使用at命令在某个指定的时间执行。如果希望作业定期运行,你可以设置一个cron作业来执行你的脚本。

如果cron不剪切它,我会使用商业调度应用程序和/或自定义工作流解决方案。我们使用一个名为jams的解决方案,但请记住它是面向.net的。

如果Cron不削减它,我会使用商业调度应用程序和/或自定义工作流解决方案。我们使用一个名为JAMS的解决方案,但是记住它是.NET的。

或者可以考虑HOOP期限调度程序或基于约束的调度。或者您可以考虑HOOP期限调度程序或基于约束的调度。