Apache spark 在spark streaming中,如何获得计算每批数据所花费的时间?

Apache spark 在spark streaming中,如何获得计算每批数据所花费的时间?,apache-spark,spark-streaming,Apache Spark,Spark Streaming,如何获得计算每批数据所花费的时间?如果我知道计算每批数据所花费的时间,我可以通过判断时间长度来优化程序。您将能够在独立模式下在Spark WEB UI(流媒体选项卡)上看到所需的信息。您有什么具体的需要分析的吗?@Sumit我使用纱线上的火花模式。在纱线下运行时,您仍然可以访问web ui

如何获得计算每批数据所花费的时间?如果我知道计算每批数据所花费的时间,我可以通过判断时间长度来优化程序。

您将能够在独立模式下在Spark WEB UI(流媒体选项卡)上看到所需的信息。您有什么具体的需要分析的吗?@Sumit我使用纱线上的火花模式。在纱线下运行时,您仍然可以访问web ui