GCE上的Hadoop实例

GCE上的Hadoop实例,hadoop,google-compute-engine,cluster-computing,google-cloud-dataproc,Hadoop,Google Compute Engine,Cluster Computing,Google Cloud Dataproc,我正在谷歌计算引擎上建立一个Hadoop集群。但是我很难理解集群实例将如何工作。我已经找了很多,但没有一个明确的答案 在设置Hadoop集群时,是否创建已安装Hadoop的一个实例的映像,并且每次启动此实例(映像)时都创建其他实例(节点) 但是这种方法需要在每次创建节点时都对节点进行配置 有没有人有过这方面的经验,可以提供一些关于在Google Compute Engine上设置Hadoop集群的文档?关于在Google云平台上运行Hadoop的最新信息可以在这里找到: 在那里,您可以找到Ha

我正在谷歌计算引擎上建立一个Hadoop集群。但是我很难理解集群实例将如何工作。我已经找了很多,但没有一个明确的答案

在设置Hadoop集群时,是否创建已安装Hadoop的一个实例的映像,并且每次启动此实例(映像)时都创建其他实例(节点)

但是这种方法需要在每次创建节点时都对节点进行配置


有没有人有过这方面的经验,可以提供一些关于在Google Compute Engine上设置Hadoop集群的文档?

关于在Google云平台上运行Hadoop的最新信息可以在这里找到:

在那里,您可以找到Hadoop安装脚本,这些脚本允许您根据指定的配置详细信息快速启动Hadoop集群。安装脚本包括使用Hadoop分布式文件系统(HDFS)作为默认文件系统或Google云存储的选项,这提供了自动容量扩展和在Hadoop集群生命周期之外持久化数据等附加功能