只有主节点使用Hadoop 2.6.0在4节点集群上工作
我正在尝试设置并使用一个4节点的Hadoop集群。 设置似乎进展顺利,因为一切都在主节点和从节点中运行 主节点:DataNode、ResourceManager、SecondaryNameNode、NameNode、NodeManager 从属:节点管理器、数据节点 此外,日志显示没有错误。但是,当我尝试运行代码时,所花费的时间与在单个节点上运行代码所花费的时间大致相同。此外,任何从属节点上的CPU活动都没有增加 从节点可以ssh到主节点,主节点正在正确的端口侦听 有人能帮我找到这个问题吗 谢谢 操作系统:Ubuntu 14.04.2 Hadoop版本:2.6.0 我见过相关的问题,但它们对我没有帮助:只有主节点使用Hadoop 2.6.0在4节点集群上工作,hadoop,mapreduce,Hadoop,Mapreduce,我正在尝试设置并使用一个4节点的Hadoop集群。 设置似乎进展顺利,因为一切都在主节点和从节点中运行 主节点:DataNode、ResourceManager、SecondaryNameNode、NameNode、NodeManager 从属:节点管理器、数据节点 此外,日志显示没有错误。但是,当我尝试运行代码时,所花费的时间与在单个节点上运行代码所花费的时间大致相同。此外,任何从属节点上的CPU活动都没有增加 从节点可以ssh到主节点,主节点正在正确的端口侦听 有人能帮我找到这个问题吗 谢谢
基本上,您只有一个数据节点和两个节点管理器。与单节点集群相比,它的配置不是很好。要检查发生了什么,可以转到资源管理器UI。默认情况下,它位于8088端口。您是否使用Ambari安装了Hadoop群集?没有。据报道,他们不支持64位Ubuntu 14。我不能改变操作系统。