检查并验证Hadoop mapreduce中的节点数?

检查并验证Hadoop mapreduce中的节点数?,hadoop,mapreduce,task,nodes,jobs,Hadoop,Mapreduce,Task,Nodes,Jobs,作业完成后,我如何知道实际在该作业上运行的节点数、映射任务数和缩减任务数 谢谢……您也可以使用jobtracker用户界面。默认情况下,它在50030上运行,URL看起来像http://myhost:50030/. 一旦你去了那里,你就可以看到你的工作使用了多少映射器和多少还原器。你可以通过点击工作链接来玩玩。谢谢兄弟的回答。。。事实上,我有点困惑,一些使用jobtracker的源代码,但我也阅读了hadoop中的use Thread,所以jobtracker在这里变成了ResourceMana

作业完成后,我如何知道实际在该作业上运行的节点数、映射任务数和缩减任务数


谢谢……

您也可以使用jobtracker用户界面。默认情况下,它在50030上运行,URL看起来像
http://myhost:50030/.


一旦你去了那里,你就可以看到你的工作使用了多少映射器和多少还原器。你可以通过点击工作链接来玩玩。

谢谢兄弟的回答。。。事实上,我有点困惑,一些使用jobtracker的源代码,但我也阅读了hadoop中的use Thread,所以jobtracker在这里变成了ResourceManager。。。那是真的吗,兄弟?谢谢……是的。第一代有Jobtracker,现在第二代由Thread负责。谢谢兄弟的帮助回答,顺便问一下,如果你不介意的话,我可以问一些关于Thread的问题吗。问题是:我的mapred-site.xml上有mapreduce.framework.name,该设置使我的作业运行较慢,但如果删除该属性,我的作业运行较快。你知道为什么会这样吗?再次感谢…当我在mapred-site.xml上添加mapreduce.framework.name时,这个设置会使我的作业运行速度变慢,但如果我删除该属性,我的作业运行速度会变快。你知道为什么会这样吗?多谢了,这意味着如果您删除了该属性,这意味着默认情况下您是在本地模式下运行它的,因此这意味着其他节点不涉及IO,因此速度很快。看看哪个默认值是本地的。