C# Web抓取和http请求太多无法应答_C#_Http_Web Scraping_Webclient

C# Web抓取和http请求太多无法应答

c# http web-scraping

C# Web抓取和http请求太多无法应答,c#,http,web-scraping,webclient,C#,Http,Web Scraping,Webclient,在处理web scraping项目时，要提取我需要的所有信息，我需要发出许多请求，但服务器在大约50个请求后，会以429状态代码进行响应，该代码指示错误“请求过多”，如何处理此错误？例如，您可能应该尝试使用HideMyIP，每5或10分钟更改一次IP，我猜你要么需要降低请求频率，要么匿名。我们网站上有几篇文章将解释如果您决定采用匿名方式，您的选择：

在处理web scraping项目时，要提取我需要的所有信息，我需要发出许多请求，但服务器在大约50个请求后，会以429状态代码进行响应，该代码指示错误“请求过多”，如何处理此错误？

例如，您可能应该尝试使用HideMyIP，每5或10分钟更改一次IP，我猜你要么需要降低请求频率，要么匿名。我们网站上有几篇文章将解释如果您决定采用匿名方式，您的选择：