Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/search/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop map reduce过程中的连接超时_Hadoop - Fatal编程技术网
Fatal编程技术网
  • hadoop/
  • Hadoop map reduce过程中的连接超时

Hadoop map reduce过程中的连接超时

hadoop

Hadoop map reduce过程中的连接超时,hadoop,Hadoop,我正在使用distcp命令将数据从一个群集传输到另一个群集。在映射缩减过程中，我遇到以下问题： java.net.ConnectException:连接超时 我正在使用以下命令： /home/hadoop/hadoop/bin/hadoop distcp -update -skipcrccheck "hftp://source:50070//hive/warehouse//tablename" "hdfs://destination:9000//hive/warehouse//tablename

我正在使用distcp命令将数据从一个群集传输到另一个群集。在映射缩减过程中，我遇到以下问题：

java.net.ConnectException:连接超时

我正在使用以下命令：

/home/hadoop/hadoop/bin/hadoop distcp -update -skipcrccheck "hftp://source:50070//hive/warehouse//tablename" "hdfs://destination:9000//hive/warehouse//tablename"
如何解决此问题。将推荐解决方案。

如果您试图将数据从一个HDFS传输到另一个HDFS，那么为什么要使用hftp命令

hftp用于将数据从ftp服务器传输到hdfs

对于hdfs到hdfs尝试此选项

/home/hadoop/hadoop/bin/hadoop distcp -update -skipcrccheck "hdfs://source:50070/hive/warehouse/tablename" "hdfs://destination:9000/hive/warehouse/tablename"
对于ftp到hdfs，请使用正确的ftp地址