Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 什么是DAGScheduler.messageProcessingTime?_Apache Spark_Jvm_Emr - Fatal编程技术网

Apache spark 什么是DAGScheduler.messageProcessingTime?

Apache spark 什么是DAGScheduler.messageProcessingTime?,apache-spark,jvm,emr,Apache Spark,Jvm,Emr,有人能告诉我在哪里可以找到我从spark sink获得的度量的描述吗?这是一个计时器,它跟踪DAGScheduler事件循环中处理消息的时间 注意,这似乎包括所有类型的事件(JobSubmitted、JobCancelled等) 它是由引入的,用于帮助解决DAGScheduler事件循环中的问题和延迟。至少据我所知 我希望能够将其用于有效负载处理时间,但这似乎不是正确的指标

有人能告诉我在哪里可以找到我从spark sink获得的度量的描述吗?

这是一个计时器,它跟踪DAGScheduler事件循环中处理消息的时间

注意,这似乎包括所有类型的事件(JobSubmitted、JobCancelled等)

它是由引入的,用于帮助解决DAGScheduler事件循环中的问题和延迟。至少据我所知

我希望能够将其用于有效负载处理时间,但这似乎不是正确的指标