.net 如何开始学习开发http抓取工具

是否有一些关于http web抓取的好教程或示例可供学习？如何开始开发一个工具，可以在一些网站上搜索并下载特定信息，这样我就可以自动收集并分析？？谢谢

通常推荐使用的工具是。它将采用格式错误的HTML并将其转换为XHTML，然后转换为可遍历的DOM，因此对于您在野外找到的代码非常有用，而不像RegEx这样注定要崩溃的方法

这里有一些示例和API文档：

一些有用的链接：