在nginx阻止我之前,我如何找到我可以向网站发出的请求数量

在nginx阻止我之前,我如何找到我可以向网站发出的请求数量,nginx,web-crawler,Nginx,Web Crawler,如果我试图从网站抓取数据,我应该知道在发现403禁止的错误之前,我每小时可以发出的请求数。有没有办法让我知道一个网站的价格 不,每个服务器都有自己的限制。可能有一些服务器不介意你在附近,并给他们尽可能多的点击率 而且,一般来说,做你想做的事情不是一个好主意 顺便说一句,Twitter等网站允许您每天、每小时等发出n个请求。如果是这样,通常会记录在网站的开发人员文档中。这似乎太难了

如果我试图从网站抓取数据,我应该知道在发现403禁止的错误之前,我每小时可以发出的请求数。有没有办法让我知道一个网站的价格

不,每个服务器都有自己的限制。可能有一些服务器不介意你在附近,并给他们尽可能多的点击率

而且,一般来说,做你想做的事情不是一个好主意


顺便说一句,Twitter等网站允许您每天、每小时等发出n个请求。如果是这样,通常会记录在网站的开发人员文档中。

这似乎太难了