Apache spark 齐柏林飞艇在静止X时间后在纱线上使用的熄火应用
使用ApacheZeppelin运行Spark on Thread，这将消耗队列的X%，即使没有人真正使用它Apache spark 齐柏林飞艇在静止X时间后在纱线上使用的熄火应用,apache-spark,yarn,apache-zeppelin,Apache Spark,Yarn,Apache Zeppelin,使用ApacheZeppelin运行Spark on Thread，这将消耗队列的X%，即使没有人真正使用它 由于我正在运行夜间CRON作业，因此我希望在X分钟不活动后，杀死/退出/退出齐柏林飞艇Spark应用程序，这样队列就可以自由地进行夜间作业。使用CRON杀死作业是在固定时间（比如凌晨4点）杀死作业的一个不错的工作解决方案 一个更优雅的解决方案是将齐柏林飞艇与Livy集成（请参阅），因为Livy可以配置为在x分钟不活动后终止（然后释放资源）
由于我正在运行夜间CRON作业，因此我希望在X分钟不活动后，杀死/退出/退出齐柏林飞艇Spark应用程序，这样队列就可以自由地进行夜间作业。使用CRON杀死作业是在固定时间（比如凌晨4点）杀死作业的一个不错的工作解决方案 一个更优雅的解决方案是将齐柏林飞艇与Livy集成（请参阅），因为Livy可以配置为在x分钟不活动后终止（然后释放资源）