Apache spark 什么是DAGScheduler.messageProcessingTime?
有人能告诉我在哪里可以找到我从spark sink获得的度量的描述吗?这是一个计时器,它跟踪DAGScheduler事件循环中处理消息的时间 注意,这似乎包括所有类型的事件(JobSubmitted、JobCancelled等) 它是由引入的,用于帮助解决DAGScheduler事件循环中的问题和延迟。至少据我所知 我希望能够将其用于有效负载处理时间,但这似乎不是正确的指标Apache spark 什么是DAGScheduler.messageProcessingTime?,apache-spark,jvm,emr,Apache Spark,Jvm,Emr,有人能告诉我在哪里可以找到我从spark sink获得的度量的描述吗?这是一个计时器,它跟踪DAGScheduler事件循环中处理消息的时间 注意,这似乎包括所有类型的事件(JobSubmitted、JobCancelled等) 它是由引入的,用于帮助解决DAGScheduler事件循环中的问题和延迟。至少据我所知 我希望能够将其用于有效负载处理时间,但这似乎不是正确的指标