Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
多节点群集Hadoop安装程序_Hadoop_Cygwin - Fatal编程技术网

多节点群集Hadoop安装程序

多节点群集Hadoop安装程序,hadoop,cygwin,Hadoop,Cygwin,伪分布式单节点集群实现 我正在将Windows7与CYGWIN一起使用,并成功安装了hadoop-1.0.3。我仍然在端口(localhost:50030、localhost:50060和localhost:50070)上启动服务作业跟踪器、任务跟踪器和namenode。我已经完成了单节点实现 现在我想实现伪分布式多节点集群。我不明白如何通过网络IP在主系统和从系统中进行划分?尝试创建要添加到集群中的VM数量。确保这些VM具有相同的hadoop版本。 计算每个虚拟机的IP。 您将在$HADOOP

伪分布式单节点集群实现

我正在将Windows7与CYGWIN一起使用,并成功安装了hadoop-1.0.3。我仍然在端口(localhost:50030、localhost:50060和localhost:50070)上启动服务作业跟踪器、任务跟踪器和namenode。我已经完成了单节点实现


现在我想实现伪分布式多节点集群。我不明白如何通过网络IP在主系统和从系统中进行划分?

尝试创建要添加到集群中的VM数量。确保这些VM具有相同的hadoop版本。 计算每个虚拟机的IP。 您将在$HADOOP_HOME/conf中找到名为master和slaves的文件,其中提到VM到conf/master文件的IP,您希望将其视为master,并对conf/slaves执行相同的操作 使用从节点IP

确保这些节点具有无密码ssh连接。 格式化namenode,然后运行start-all.sh


谢谢,

对于您的ssh问题,只需遵循单节点群集的链接:

是的,您需要在conf文件中指定主服务器和从服务器的ip 为此,您可以参考以下url:


我希望这能有所帮助。

谢谢你的回答。实际上,我有两个相同n/w的系统,使用ips(192.167.1.1和192.167.1.2)和系统名hadop@master及hadoo@slave. 我正在做和u sad相同的工作,但问题是从机访问主机,但主机出现异常(ssh:连接到主机从机pc端口22:连接超时)。我也知道chk端口22正在运行plz建议现在有什么问题。确保id_dsa.pubhadoop@master一定要抄进去hadoop@slaves.ssh/authorized_密钥,反之亦然。这仅仅意味着两台机器的.ssh/authorized_密钥看起来是一样的。sir当我将id从主机复制到从机时,它给出了(ssh:connect to host slave pc port 22:Connection timeout),但当将id从从从机复制到主机时,它工作正常并建立了连接。我们可以通过命令(ssh)进行切换hadoop@master). plz建议主pc中的问题所在,从而给出连接问题。您可以从从属pc连接主pc,然后连接它,并用从属pc的.ssh/authorized_密钥替换主pc的.ssh/authorized_密钥文件。它肯定会工作。先生,正如你所说,我现在又在做它在从机上工作,但主机例外:hadoop@hadoop-master~$scp~/.ssh/id_dsa.pubhadoop@hadoop-从属:~/.ssh/master-key.pub ssh:连接到主机hadoop从属端口22:连接超时断开连接Hai ruchi,我正在尝试做同样的事情,即使在单节点本身得到问题,我下面,请帮助我或分享两个配置的设置教程HII,如果你有任何关于单节点plz问我,你也如下:谢谢Ruchi,我将从单节点开始。您仍在尝试群集节点吗?jai hind;)hadoop您使用的是哪个版本?我正在使用hadoop-1.0.3和hbase 0.94。是的,因为它很好,但只是检查兼容性。