用于Hadoop监控的Ganglia或X-trace

用于Hadoop监控的Ganglia或X-trace,hadoop,monitoring,ganglia,Hadoop,Monitoring,Ganglia,我试图捕获hadoop任务(mapper和reducer)的磁盘I/O和网络I/O,即即时带宽、累积流量、源地址和目标地址。我发现了两个流行的Hadoop监控工具:Ganglia(通常与Nagios结合)和X-Trace。Ganglia于2004年由加州大学伯克利分校提出,X-Trace也于2007年由加州大学伯克利分校开发 任何关于这两种工具的利弊的建议都将不胜感激 我将从ganglia或munin开始——它们将告诉您集群中不同机器上的资源利用率 X-trace是一个相当学术性的项目,它生成有

我试图捕获hadoop任务(mapper和reducer)的磁盘I/O和网络I/O,即即时带宽、累积流量、源地址和目标地址。我发现了两个流行的Hadoop监控工具:Ganglia(通常与Nagios结合)和X-Trace。Ganglia于2004年由加州大学伯克利分校提出,X-Trace也于2007年由加州大学伯克利分校开发


任何关于这两种工具的利弊的建议都将不胜感激

我将从ganglia或munin开始——它们将告诉您集群中不同机器上的资源利用率


X-trace是一个相当学术性的项目,它生成有关分布式事务、延迟和瓶颈以及分布式系统中的控制流的数据。不幸的是,目前还没有得到很好的支持。

为什么有人认为我的问题毫无用处而不做任何解释。你可以回答,然后告诉我这是个糟糕的问题。谢谢。你说得对,X-trace现在不太受支持。我使用Ganglia是因为Hadoop内置了对它的支持,并且它输出了很多度量。