Web 网站中请求之间的Ping持续时间 让我说,我有两个请求,它们之间的最小持续时间是什么,这样一个大的网站就不会认为我是一个机器人?p>

Web 网站中请求之间的Ping持续时间 让我说,我有两个请求,它们之间的最小持续时间是什么,这样一个大的网站就不会认为我是一个机器人?p>,web,ping,Web,Ping,这里我提出了一个请求,请求在150ms到250ms之间得到了解决,因为我正在下载页面。以下请求是在我的第一个请求下载200毫秒后发出的。总共大约400毫秒的时间,这算是机器人吗 通常,您有一个名为User Agent的http头,其中(诚实的)机器人应该告诉服务器“嘿,我是一个机器人”,当然也有一些爬虫和机器人不将自己标识为机器人,但我们正试图捕获这些爬虫和机器人。使用许多不同的方法。确切地说,您的目标上正在使用哪些方法,只有负责该目标的系统管理员才能回答 我会以诚实的方式,将自己识别为机器人,

这里我提出了一个请求,请求在150ms到250ms之间得到了解决,因为我正在下载页面。以下请求是在我的第一个请求下载200毫秒后发出的。总共大约400毫秒的时间,这算是机器人吗


通常,您有一个名为User Agent的http头,其中(诚实的)机器人应该告诉服务器“嘿,我是一个机器人”,当然也有一些爬虫和机器人不将自己标识为机器人,但我们正试图捕获这些爬虫和机器人。使用许多不同的方法。确切地说,您的目标上正在使用哪些方法,只有负责该目标的系统管理员才能回答

我会以诚实的方式,将自己识别为机器人,但我会检查robots.txt文件中的爬网速率限制,并尊重它


诚实的机器人通常不是问题,不诚实的机器人才是问题。

我投票将这个问题作为离题题来结束,因为它与编程无关