Hadoop 带Talend的HDFS

Hadoop 带Talend的HDFS,hadoop,talend,Hadoop,Talend,我正在尝试使用Talend 6.3将本地windows计算机上的csv文件放入HDFS 我有4节点群集(所有来自azure的linux服务器): 1个名称节点和3个数据节点 我在运行时遇到以下错误: “组件tHDFSPut\u 1中出现异常 org.apache.hadoop.ipc.RemoteException(java.io.IOException):文件/user/root/5/source.csv只能复制到0个节点,而不能复制到minReplication(=1)。有3个datanod

我正在尝试使用Talend 6.3将本地windows计算机上的csv文件放入HDFS

我有4节点群集(所有来自azure的linux服务器):

1个名称节点和3个数据节点

我在运行时遇到以下错误:

“组件tHDFSPut\u 1中出现异常 org.apache.hadoop.ipc.RemoteException(java.io.IOException):文件/user/root/5/source.csv只能复制到0个节点,而不能复制到minReplication(=1)。有3个datanode正在运行,3个节点在此操作中被排除。“

正在HDFS中创建文件,但它是空文件

注意:我正在名称节点URL中写入我的名称节点IP地址

我用沙盒也试过。同样的错误也存在

更新:

我创建了一个完整的新集群(1个namenode和3个datanodes)。但我还是犯了同样的错误


一切都在运行,并且是绿色的(在Ambari)。并且我能够通过hadoop fs-put来输入文件。talend可能有问题?

根据您的更新,我想说talend肯定有问题(可能是您如何配置/如何使用它)。因此,我删除了我的答案请记住,这是一件非常基本的事情,你要么做了一些奇怪的事情,要么其他人应该遇到它。也许搜索有帮助,我发现了一些可能相关的东西:根据您的更新,我想说Talend肯定有问题(可能是您如何配置/如何使用它)。因此,我删除了我的答案请记住,这是一件非常基本的事情,你要么做了一些奇怪的事情,要么其他人应该遇到它。也许搜索有帮助,以下是我发现的一些可能相关的东西: