Hadoop 将本地文件复制到hdfs非常慢
我正在尝试使用以下命令将本地文件复制到hdfs $hdfs dfs-put[local\u path][dfs\u uri] 这些命令可以工作并复制文件，但速度为2 KB/秒，甚至更慢 感谢您的帮助：）Hadoop 将本地文件复制到hdfs非常慢,hadoop,copy,hdfs,bigdata,Hadoop,Copy,Hdfs,Bigdata,我正在尝试使用以下命令将本地文件复制到hdfs $hdfs dfs-put[local\u path][dfs\u uri] 这些命令可以工作并复制文件，但速度为2 KB/秒，甚至更慢 感谢您的帮助：） 注：Cloudera Express 5.5.1（#8由jenkins于20151201-1818 git:2a7dfe22d921bef89c7ee3c2981cb4c1dc43de7b上构建）您从何处运行此命令？集群还是PC？@DurgaViswanathGadiraju我正在hdfs主节点
注：Cloudera Express 5.5.1（#8由jenkins于20151201-1818 git:2a7dfe22d921bef89c7ee3c2981cb4c1dc43de7b上构建）您从何处运行此命令？集群还是PC？@DurgaViswanathGadiraju我正在hdfs主节点中使用ssh连接运行此命令，其中还包含我需要复制到hdfs的文件。Hue也存在同样的问题，上传文件需要几个小时才能上传。e、 g:上传300MB的文件花了我8个小时：）那样的话，可能是网络问题。可能与您的网络管理员合作会有所帮助。通常，您应该在同一个集群中拥有网关节点，您应该使用它将数据复制到HDFSi。我正在使用Ubuntu服务器14.04，我已经搜索了google，有人打算更改为CentOS。我不知道问题出在操作系统、设置或其他地方，你是从哪里运行这个命令的？集群还是PC？@DurgaViswanathGadiraju我正在hdfs主节点中使用ssh连接运行此命令，其中还包含我需要复制到hdfs的文件。Hue也存在同样的问题，上传文件需要几个小时才能上传。e、 g:上传300MB的文件花了我8个小时：）那样的话，可能是网络问题。可能与您的网络管理员合作会有所帮助。通常，您应该在同一个集群中拥有网关节点，您应该使用它将数据复制到HDFSi。我正在使用Ubuntu服务器14.04，我已经搜索了google，有人打算更改为CentOS。我不知道问题出在操作系统、设置或其他方面