在docker容器上运行hadoop集群

在docker容器上运行hadoop集群,hadoop,networking,docker,amazon-ec2,cluster-computing,Hadoop,Networking,Docker,Amazon Ec2,Cluster Computing,我想运行一个多节点hadoop集群,每个节点位于不同主机上的docker容器中。这张图片-可以在伪分布式模式下启动hadoop,最简单的修改方法是什么,使每个节点都位于不同的ec2主机上的不同容器中?我使用两个容器在两个不同的ubuntu主机上运行主节点和从节点。我使用weave在容器之间建立了网络。我已经在docker hub帐户div4上添加了容器的图像。我安装hadoop的方式与安装在不同主机上的方式相同。我在这里添加了两个带有Coomand的图像来运行haddop: .来自sequen

我想运行一个多节点hadoop集群,每个节点位于不同主机上的docker容器中。这张图片-可以在伪分布式模式下启动hadoop,最简单的修改方法是什么,使每个节点都位于不同的ec2主机上的不同容器中?

我使用两个容器在两个不同的ubuntu主机上运行主节点和从节点。我使用weave在容器之间建立了网络。我已经在docker hub帐户div4上添加了容器的图像。我安装hadoop的方式与安装在不同主机上的方式相同。我在这里添加了两个带有Coomand的图像来运行haddop:


.

来自sequenceiq的人员创建了一个名为cloud break的新项目,该项目旨在与不同的云提供商合作,并在其上轻松创建hadoop集群。您只需输入您的凭据,然后就我所见,它对所有提供商都适用

因此,对于ec2来说,这可能是最简单的解决方案(特别是因为有一个漂亮的GUI):


您找到解决方案了吗?如果找到,请指导我