Hadoop 分析MapReduce作业

Hadoop 分析MapReduce作业,hadoop,mapreduce,Hadoop,Mapreduce,我正在使用oozie工作流在CDH5上的分布式集群上启动多个mapreduce作业 想知道是否有人可以推荐任何剖析器。我看着HPROF和jumbune。有什么想法吗?一种可能是将内置计数器用于时间关键部分: long start = Time.now(); codeToTime(); long timeElapsed = Time.now() - start; reporter.incrCounter("performance", "codeWeTimed", timeElapsed);

我正在使用oozie工作流在CDH5上的分布式集群上启动多个mapreduce作业


想知道是否有人可以推荐任何剖析器。我看着HPROF和jumbune。有什么想法吗?

一种可能是将内置计数器用于时间关键部分:

long start = Time.now();
codeToTime();
long timeElapsed = Time.now() - start;
reporter.incrCounter("performance", "codeWeTimed", timeElapsed);