与wget并行镜像ftp主机(百万个小文件)

与wget并行镜像ftp主机(百万个小文件),ftp,wget,Ftp,Wget,我需要从FTP服务器上下载十万个文件,每个文件只有几kB。我不知道他们的名字,也不知道任何事情,但我确实需要复制完全相同的结构 我的最佳想法是使用wget-m,但是当您需要设置每个单独的下载时,它需要无限的时间。我以前读过很多关于使用parallel的答案,但是因为我没有URL列表,所以这不实用。有选择吗

我需要从FTP服务器上下载十万个文件,每个文件只有几kB。我不知道他们的名字,也不知道任何事情,但我确实需要复制完全相同的结构

我的最佳想法是使用
wget-m
,但是当您需要设置每个单独的下载时,它需要无限的时间。我以前读过很多关于使用
parallel
的答案,但是因为我没有URL列表,所以这不实用。有选择吗