Hadoop 将数据/文件从Windows复制到Linux计算机或HDFS
我正在处理大数据,希望从远程计算机中的文件系统而不是从任何数据库获取数据/文件,即将文件从远程linux/windows计算机复制到hdfs。请帮助我。您可以使用将文件从本地文件复制到远程文件系统,反之亦然 scp命令 scp[Options][[User@]From_Host:]源_文件[[User@]To_Host:][Destination_文件]Hadoop 将数据/文件从Windows复制到Linux计算机或HDFS,hadoop,filesystems,hdfs,bigdata,Hadoop,Filesystems,Hdfs,Bigdata,我正在处理大数据,希望从远程计算机中的文件系统而不是从任何数据库获取数据/文件,即将文件从远程linux/windows计算机复制到hdfs。请帮助我。您可以使用将文件从本地文件复制到远程文件系统,反之亦然 scp命令 scp[Options][[User@]From_Host:]源_文件[[User@]To_Host:][Destination_文件] 通过使用,您可以将文件从本地文件复制到远程文件系统,反之亦然 scp命令 scp[Options][[User@]From_Host:]源_文
通过使用,您可以将文件从本地文件复制到远程文件系统,反之亦然 scp命令 scp[Options][[User@]From_Host:]源_文件[[User@]To_Host:][Destination_文件]
尝试安装
Hue
。这是一个非常有用的工具。
有关详细信息,请访问此链接:
在色调中进入文件浏览器,单击“添加文件”按钮,然后您可以将文件上载到
HDFS
尝试安装色调
。这是一个非常有用的工具。
有关详细信息,请访问此链接:
以色调进入文件浏览器,然后单击“添加文件”按钮,然后您可以将文件上载到
HDFS
您的意思是将文件从远程linux机器复制到本地linux机器?将文件从远程linux/windows机器复制到本地机器或HDFS。请注意,在问题中,您的意思是将文件从远程linux机器复制到本地linux机器?从远程linux/windows机器复制文件到本地计算机或hdfs。在问题中,我可以在源文件中给出我的hdfs路径吗?
?是的,您可以给出hdfs路径以将文件导出到该路径,但在此之前,您需要这样写username@hostname:/hdfs\u路径,如果是hdfs,然后,您可以使用hdfs dfs-将您的本地文件hdfs路径上载到Hadoop。我尝试了此scp命令,它在linux systesm之间工作正常,但在linux和Windows系统之间不工作。为此,您可以使用filezilla,这是链接,感谢您的帮助。如果你喜欢这个问题,请向上投票。我可以在源文件中给出我的hdfs路径吗?
?是的,你可以给出hdfs路径以便将文件导出到该路径,但在此之前,你需要这样写username@hostname:/hdfs\u路径,如果是hdfs,然后,您可以使用hdfs dfs-将您的本地文件hdfs路径上载到Hadoop。我尝试了此scp命令,它在linux systesm之间工作正常,但在linux和Windows系统之间不工作。为此,您可以使用filezilla,这是链接,感谢您的帮助。如果您喜欢这个问题,请向上投票。我正在使用cloudera cdh 5.7,它已经有了Hue
,但是如何使用Hue
从windows机器移动文件?在Hue中进入文件浏览器,然后单击“添加文件”按钮,它将显示我的linux机器本地文件系统。没有从windows文件系统选择的选项。您可以从windows文件系统上载文件。谢谢您的帮助!有什么方法可以自动化这个过程吗?我正在使用cloudera cdh 5.7,它已经有了Hue
,但是如何使用Hue
从windows机器移动文件?在Hue中进入文件浏览器,点击“添加文件”按钮,它显示了我的linux机器本地文件系统。没有从windows文件系统选择的选项。您可以从windows文件系统上载文件。谢谢您的帮助!有没有办法使这个过程自动化?