Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 如何在本地模式下启用垃圾收集信息?_Apache Spark - Fatal编程技术网

Apache spark 如何在本地模式下启用垃圾收集信息?

Apache spark 如何在本地模式下启用垃圾收集信息?,apache-spark,Apache Spark,我遵循Spark的方法收集JVM的垃圾收集信息。我在spark defaults.conf中添加了以下行,希望得到它们 spark.executor.extraJavaOptions -verbose:gc -XX:+PrintGCDetails -XX:+PrintGCTimeStamps 我在本地模式下的驱动程序输出中没有看到任何GC相关信息。如何启用它们?tl;dr改用spark.driver.extraJavaOptions 由于您在local模式下工作,因此驱动程序和执行器是相同的

我遵循Spark的方法收集JVM的垃圾收集信息。我在spark defaults.conf中添加了以下行,希望得到它们

spark.executor.extraJavaOptions  -verbose:gc -XX:+PrintGCDetails -XX:+PrintGCTimeStamps

我在本地模式下的驱动程序输出中没有看到任何GC相关信息。如何启用它们?

tl;dr改用
spark.driver.extraJavaOptions

由于您在
local
模式下工作,因此驱动程序和执行器是相同的,即只有一个JVM承载驱动程序和一个执行器