Apache spark 有没有办法监控Apache Spark应用程序的RAM和CPU使用情况?

Apache spark 有没有办法监控Apache Spark应用程序的RAM和CPU使用情况?,apache-spark,monitor,Apache Spark,Monitor,我需要监控运行在独立Spark群集上的Spark应用程序的RAM和CPU 我尝试过使用java控制台,它工作得很好,但我需要监控各种应用程序,我需要为每个应用程序设置一个不同的java控制台端口 在防火墙后面,这是一项非常漫长而乏味的工作 例如,有没有一种方法可以从Spark UI或其他东西监视应用程序?如果您使用Ubuntu,您可以使用htop。 要安装,请执行以下操作: sudo apt-get install htop 你试过神经节吗?

我需要监控运行在独立Spark群集上的Spark应用程序的RAM和CPU

我尝试过使用java控制台,它工作得很好,但我需要监控各种应用程序,我需要为每个应用程序设置一个不同的java控制台端口

在防火墙后面,这是一项非常漫长而乏味的工作


例如,有没有一种方法可以从Spark UI或其他东西监视应用程序?

如果您使用Ubuntu,您可以使用
htop
。 要安装,请执行以下操作:

sudo apt-get install htop

你试过神经节吗?