Apache spark spark UI中已完成任务的摘要指标:子任务总时间是否小于持续时间?

Apache spark spark UI中已完成任务的摘要指标:子任务总时间是否小于持续时间?,apache-spark,monitoring,Apache Spark,Monitoring,我正在学习spark,通过回顾spark峰会演示文稿中的视频,比如这一段->来学习spark。非常好的视频,但我确实对我提供的youtube链接起点处的幻灯片有疑问(我还在下面附上该幻灯片的屏幕截图)。我的困惑源于这样一个事实:在幻灯片上,最小值/最大值/中值 分析的两个任务的持续时间为11秒。但是, 子任务时间(如调度程序延迟、gc时间、“获取结果”时间等)远未接近11秒。我想知道还有什么其他情况会使总任务持续时间增加到11秒?是否有其他屏幕会丢失此信息(似乎)呢?提前感谢! --任务的执行时

我正在学习spark,通过回顾spark峰会演示文稿中的视频,比如这一段->来学习spark。非常好的视频,但我确实对我提供的youtube链接起点处的幻灯片有疑问(我还在下面附上该幻灯片的屏幕截图)。我的困惑源于这样一个事实:在幻灯片上,最小值/最大值/中值 分析的两个任务的持续时间为11秒。但是, 子任务时间(如调度程序延迟、gc时间、“获取结果”时间等)远未接近11秒。我想知道还有什么其他情况会使总任务持续时间增加到11秒?是否有其他屏幕会丢失此信息(似乎)呢?提前感谢!

--

任务的执行时间可以分解为调度程序延迟+反序列化时间+随机读取时间(可选)+执行器运行时间+随机写入时间(可选)+结果序列化时间+获取结果时间。调整这些方面有助于优化性能。-IBM知识中心可以将任务的执行时间分解为调度程序延迟+反序列化时间+随机读取时间(可选)+执行器运行时+随机写入时间(可选)+结果序列化时间+获取结果时间。调整这些方面有助于优化性能。-IBM知识中心

那么,可能该表遗漏了无序读/写时间,这将导致丢失的秒数?我买这个。谢谢!因此,可能该表遗漏了无序读/写时间,这将导致丢失的秒数nds?我会买的。谢谢!