Python 分块下载大量文件

Python 分块下载大量文件,python,firefox,selenium,selenium-webdriver,download,Python,Firefox,Selenium,Selenium Webdriver,Download,我试图通过提供一个输入列表,在Firefox中使用Python Selenium下载大量(数千)文件。我正在成功下载 由于有成千上万的文件我想下载,我想知道你是否可以建议一种方法开始下载10个文件,等到他们完成,然后开始下一个10。我该怎么做 我尝试了fp.set_preference(“browser.download.manager.closeWhenDone”,True)在下载完成后关闭浏览器。但它并没有关闭 您可以使用,或任何其他使任务的生成和使用更容易的库 通过使用这些库,您可以开始下

我试图通过提供一个输入列表,在Firefox中使用Python Selenium下载大量(数千)文件。我正在成功下载

由于有成千上万的文件我想下载,我想知道你是否可以建议一种方法开始下载10个文件,等到他们完成,然后开始下一个10。我该怎么做

我尝试了
fp.set_preference(“browser.download.manager.closeWhenDone”,True)
在下载完成后关闭浏览器。但它并没有关闭

您可以使用,或任何其他使任务的生成和使用更容易的库


通过使用这些库,您可以开始下载前10个文件。完成这些文件后,下一个文件将立即开始自动下载。

对于仅下载文件,Selenium是完全错误的工具。看看@SiKing Oh之类的东西,我忘了提到该网站有一些限制,它不允许我使用urllib/wget/mechanize/任何类似的东西下载。如果你能取消你的反对票,我将不胜感激,因为我没有盲目地发布这个问题,我知道我在做什么。谢谢,谢谢。我会试试的,会让你知道的。