Java 火花就业创造时间_Java_Apache Spark

Java 火花就业创造时间

java apache-spark

Java 火花就业创造时间,java,apache-spark,Java,Apache Spark,如何使用taskcontext访问作业创建时间。我计划这次使用不同的执行器，并将其设置为持久化数据，以便在以后的过程中充分发挥作用。由于作业创建时间是唯一的，即使从不同的执行器检索时，它也有助于跟踪一个作业中的持久数据是否可以从TaskMetrics获取数据？如何访问Jobdata类我可以使用侦听器来实现这一点。我必须扩展SparkListners类，并跟踪一个作业（一个作业的所有任务）何时结束、何时启动和执行取决于此的操作我可以使用侦听器来实现这一点。我必须扩展SparkListne

如何使用taskcontext访问作业创建时间。我计划这次使用不同的执行器，并将其设置为持久化数据，以便在以后的过程中充分发挥作用。由于作业创建时间是唯一的，即使从不同的执行器检索时，它也有助于跟踪一个作业中的持久数据

是否可以从

TaskMetrics

获取数据？

如何访问Jobdata类

我可以使用侦听器来实现这一点。我必须扩展SparkListners类，并跟踪一个作业（一个作业的所有任务）何时结束、何时启动和执行取决于此的操作