Warning: file_get_contents(/data/phpspider/zhask/data//catemap/4/regex/18.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Mapreduce 亚马逊emr上的跑步猪速度非常慢_Mapreduce_Apache Pig_Emr - Fatal编程技术网

Mapreduce 亚马逊emr上的跑步猪速度非常慢

Mapreduce 亚马逊emr上的跑步猪速度非常慢,mapreduce,apache-pig,emr,Mapreduce,Apache Pig,Emr,我使用AWSSDKforPHP启动了一个emr实例来运行pig脚本,速度慢得令人无法忍受。如果我在pig local模式下在ec2实例上运行相同的pig作业,只需要10分钟,如果我启动emr以mapreduce模式运行pig作业,则需要几个小时。这很奇怪。我曾经在mapreduce模式下在内部hadoop集群上运行类似的pig作业,速度非常快。是否需要指定任何配置设置?我已经为emr设置了1个主节点和4个从节点,仍然不够 谢谢。你能看看时间到哪里了吗?例如,您的任务是否正在等待可用的容器,然后一

我使用AWSSDKforPHP启动了一个emr实例来运行pig脚本,速度慢得令人无法忍受。如果我在pig local模式下在ec2实例上运行相同的pig作业,只需要10分钟,如果我启动emr以mapreduce模式运行pig作业,则需要几个小时。这很奇怪。我曾经在mapreduce模式下在内部hadoop集群上运行类似的pig作业,速度非常快。是否需要指定任何配置设置?我已经为emr设置了1个主节点和4个从节点,仍然不够


谢谢。

你能看看时间到哪里了吗?例如,您的任务是否正在等待可用的容器,然后一个接一个地被释放?您能看到时间在哪里吗?例如,您的任务是否正在等待可用的容器,然后逐个释放?