Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/sharepoint/4.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop Apache Pig-错误2118:对于输入字符串;4f8:0:a111::add:9898“;_Hadoop_Hbase_Apache Pig - Fatal编程技术网

Hadoop Apache Pig-错误2118:对于输入字符串;4f8:0:a111::add:9898“;

Hadoop Apache Pig-错误2118:对于输入字符串;4f8:0:a111::add:9898“;,hadoop,hbase,apache-pig,Hadoop,Hbase,Apache Pig,我们最近将集群升级为使用Hadoop 2.0.0-cdh4.4.0 更换后,我们需要重新安装pig,它过去工作得非常好。安装后,不会创建最简单的HBase作业 原始缓冲区=加载'hbase://data_table“使用 org.apache.pig.backend.hadoop.hbase.hbastorage('external_data:downloaded', '-limit=1 -gte=0-lte=1') AS(数据:bytearray) 这一点在魔法方面是失败的: 失败的作业:作业

我们最近将集群升级为使用Hadoop 2.0.0-cdh4.4.0

更换后,我们需要重新安装pig,它过去工作得非常好。安装后,不会创建最简单的HBase作业

原始缓冲区=加载'hbase://data_table“使用 org.apache.pig.backend.hadoop.hbase.hbastorage('external_data:downloaded', '-limit=1 -gte=0-lte=1') AS(数据:bytearray)

这一点在魔法方面是失败的:

失败的作业:作业ID别名功能消息输出 不适用原始缓冲区映射唯一消息: org.apache.pig.backend.executionengine.ExecutionException:错误2118:For 输入字符串:“4f8:0:a111::add:9898”位于 org.apache.pig.backend.hadoop.executionengine.mapReduceLayer.PigInputFormat.getSplits(PigInputFormat.java:288) 在 org.apache.hadoop.mapred.JobClient.writeNewSplits(JobClient.java:1063) 在 org.apache.hadoop.mapred.JobClient.writeSplits(JobClient.java:1080) 位于org.apache.hadoop.mapred.JobClient.access$600(JobClient.java:174) 位于org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:992) org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:945)位于 java.security.AccessController.doPrivileged(本机方法)位于 javax.security.auth.Subject.doAs(Subject.java:415)位于 org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1408) 在 org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:945) 位于org.apache.hadoop.mapreduce.Job.submit(Job.java:566) org.apache.hadoop.mapreduce.lib.jobcontrol.ControlledJob.submit(ControlledJob.java:319) 在 org.apache.hadoop.mapreduce.lib.jobcontrol.jobcontrol.startReadyJobs(jobcontrol.java:239) 在 org.apache.hadoop.mapreduce.lib.jobcontrol.jobcontrol.run(jobcontrol.java:270) 在 org.apache.pig.backend.hadoop23.PigJobControl.run(PigJobControl.java:160) 在java.lang.Thread.run(Thread.java:744)的 org.apache.pig.backend.hadoop.executionengine.mapReduceLayer.mapreduceLancher$1.run(mapreduceLancher.java:257) 原因:java.lang.NumberFormatException:对于输入字符串: “4f8:0:a111::add:9898”位于 forInputString(NumberFormatException.java:65) 位于java.lang.Integer.parseInt(Integer.java:492) java.lang.Integer.parseInt(Integer.java:527)位于 DnsClient.(DnsClient.java:122)位于 Resolver.(Resolver.java:61)位于 com.sun.jndi.dns.DnsContext.getResolver(DnsContext.java:570)位于 com.sun.jndi.dns.DnsContext.c_getAttributes(DnsContext.java:430)位于 com.sun.jndi.toolkit.ctx.ComponentDirContext.p_getAttributes(ComponentDirContext.java:231) 在 com.sun.jndi.toolkit.ctx.PartialCompositeDirContext.getAttributes(PartialCompositeDirContext.java:139) 在 com.sun.jndi.toolkit.url.GenericURLDirContext.getAttributes(GenericURLDirContext.java:103) 在 javax.naming.directory.InitialDirContext.getAttributes(InitialDirContext.java:142) 位于org.apache.hadoop.net.DNS.reverseDns(DNS.java:85) org.apache.hadoop.hbase.mapreduce.TableInputFormatBase.reverseDNS(TableInputFormatBase.java:219) 在 org.apache.hadoop.hbase.mapreduce.TableInputFormatBase.getSplits(TableInputFormatBase.java:184) 在 org.apache.pig.backend.hadoop.hbase.HBaseTableInputFormat.getSplits(HBaseTableInputFormat.java:87) 在 org.apache.pig.backend.hadoop.executionengine.mapReduceLayer.PigInputFormat.getSplits(PigInputFormat.java:274) ... 还有16个


我们怀疑对tmp文件夹有权限,但似乎没有问题(即,创建作业目录时,pig runner(!)是其所有者)。我们可能会错过的任何建议都将不胜感激。

对我来说像是IPv6地址-建议您调查禁用群集上的IPv6功能对我来说像是IPv6地址-建议您调查禁用群集上的IPv6功能对我来说像是IPv6地址-建议您调查禁用群集上的IPv6功能

对我来说像是IPv6地址-建议您调查禁用群集上的IPv6功能

对我来说像是IPv6地址-建议您调查禁用群集上的IPv6功能非常感谢,@ChrisWhite,这是正确的提示。如果你能将此添加为答案,我将能够接受。在我看来,这是一个IPv6地址-建议你调查禁用群集上的IPv6功能非常感谢,@ChrisWhite,这是正确的提示。如果你能将此添加为答案,我将能够接受。在我看来,这是一个IPv6地址-建议你调查禁用群集上的IPv6功能非常感谢,@ChrisWhite,这是正确的提示。如果你能将此添加为答案,我将能够接受。在我看来,这是一个IPv6地址-建议你调查禁用群集上的IPv6功能非常感谢,@ChrisWhite,这是正确的提示。如果你可以添加这个作为答案,我将能够接受它。在Ubuntu上禁用它的步骤可以找到,例如这里:。另外,在我的例子中,我需要删除/etc/resolv.conf中的IPv6条目。可以在Ubuntu上找到禁用它的步骤,例如:。另外,在我的例子中,我需要删除/etc/resolv.conf中的IPv6条目。可以在Ubuntu上找到禁用它的步骤,例如:。另外,在我的例子中,我需要删除/etc/resolv.conf中的IPv6条目。可以在Ubuntu上找到禁用它的步骤,例如:。另外,在我的例子中,我需要删除/etc/resolv.conf中的IPv6条目。