Apache spark 如何获得Spark Streaming运行时间
我需要设置一个Spark流媒体应用程序。应用程序的作业需要根据整个应用程序运行时间做出一些决策 例如,假设Spark Streaming应用程序是在08:00提交的。在08:00和10:00之间运行的作业应执行加号操作,而在10:00之后运行的作业应执行减号操作Apache spark 如何获得Spark Streaming运行时间,apache-spark,spark-streaming,Apache Spark,Spark Streaming,我需要设置一个Spark流媒体应用程序。应用程序的作业需要根据整个应用程序运行时间做出一些决策 例如,假设Spark Streaming应用程序是在08:00提交的。在08:00和10:00之间运行的作业应执行加号操作,而在10:00之后运行的作业应执行减号操作 如何记录第一个作业(或应用程序)的启动时间并确定每个作业与第一个作业之间的间隔?还是有其他好的解决办法 SparkContext的方法返回其激活的时间
如何记录第一个作业(或应用程序)的启动时间并确定每个作业与第一个作业之间的间隔?还是有其他好的解决办法
SparkContext
的方法返回其激活的时间