Hadoop 在AmazonEMR中,核心实例、映射器和映射槽之间的关系是什么?
我对核心实例和每个实例可以拥有的映射器之间的关系感到困惑。这些映射器是如何创建的?如果我将核心实例计数设置为0,那么只有主节点在运行,为什么MapReduce作业可以在没有任何任务节点的情况下运行Hadoop 在AmazonEMR中,核心实例、映射器和映射槽之间的关系是什么?,hadoop,emr,mapper,Hadoop,Emr,Mapper,我对核心实例和每个实例可以拥有的映射器之间的关系感到困惑。这些映射器是如何创建的?如果我将核心实例计数设置为0,那么只有主节点在运行,为什么MapReduce作业可以在没有任何任务节点的情况下运行 提前感谢。核心数量意味着给定集群中每台机器上实现了多少个处理器。此外,每个核心可以运行一个映射器 您不必担心映射器的创建,因为hadoop框架将为您提供映射器。这是一个非常好的问题。我的猜测是,在没有核心或任务节点的情况下,EMR足够聪明,可以设置主节点来运行MapReduce作业。那是猜测 如果你想
提前感谢。核心数量意味着给定集群中每台机器上实现了多少个处理器。此外,每个核心可以运行一个映射器
您不必担心映射器的创建,因为hadoop框架将为您提供映射器。这是一个非常好的问题。我的猜测是,在没有核心或任务节点的情况下,EMR足够聪明,可以设置主节点来运行MapReduce作业。那是猜测 如果你想知道我是不是对的,旋转一个星系团。然后启动MapReduce作业,同时通过
jps-lm
监视java进程,并查看是否有任何映射程序进程在主节点上启动