自制网络爬虫的问题 我在C++中构建了一个网络爬虫。我正在使用一个名为URLdownloadToFile()的API 是否有其他可以使用的API APIURLdownloadToFile()对某些URL运行良好,而对其他URL运行不正常?请提出一些我可以克服这个问题的方法

自制网络爬虫的问题 我在C++中构建了一个网络爬虫。我正在使用一个名为URLdownloadToFile()的API 是否有其他可以使用的API APIURLdownloadToFile()对某些URL运行良好,而对其他URL运行不正常?请提出一些我可以克服这个问题的方法,c++,web-applications,C++,Web Applications,谢谢, Dnyaneshwari C.您可能需要研究libcurl,它应该允许您使用各种协议提取内容。这也应该支持代理等,这可能是给你的问题与具体的网址。另见 您可能想看看哪个是用于HTTP网络堆栈高级接口的简单C API。另一个选项是编译得更复杂,并且需要处理COM。< P>除非有一个特殊的原因来支持C++,否则最好切换到Python并使用。我使用了curl,这很好,但是我所有的web内容现在都是用Python完成的我们需要更多的细节-哪些URL不起作用,以及这些URL有什么问题?如果没有(a

谢谢,
Dnyaneshwari C.

您可能需要研究libcurl,它应该允许您使用各种协议提取内容。这也应该支持代理等,这可能是给你的问题与具体的网址。另见

您可能想看看哪个是用于HTTP网络堆栈高级接口的简单C API。另一个选项是编译得更复杂,并且需要处理COM。

< P>除非有一个特殊的原因来支持C++,否则最好切换到Python并使用。我使用了curl,这很好,但是我所有的web内容现在都是用Python完成的

我们需要更多的细节-哪些URL不起作用,以及这些URL有什么问题?如果没有(a)你提供更多信息,或者(b)阅读你的想法以提取所述信息,任何人都绝对无法帮助你。请说得更具体些。