Http 我可以被禁止运行HEAD请求吗?

Http 我可以被禁止运行HEAD请求吗?,http,web-crawler,Http,Web Crawler,我有一个具体的想法,就是每天在几个第三方URL上运行HEAD请求。提醒一下,这种类型的请求不会下载网页的内容(正文),而且是相当轻量级的。我的目标只是评估URL是否仍然可用 我想知道这是否可能被第三方网站禁止?在我看来,它不应该,因为我不会下载任何内容。我想要的唯一信息是知道URL是否仍然有效 谢谢 当然,阻止这样的请求是可能的,问题是是否有人会介意。当然,如果请求是与第三方业务利益相关的线程,则可能会出现这种情况。和往常一样,在这种情况下:你们应该问他们……当然有可能阻止这样的请求,问题是是否

我有一个具体的想法,就是每天在几个第三方URL上运行HEAD请求。提醒一下,这种类型的请求不会下载网页的内容(正文),而且是相当轻量级的。我的目标只是评估URL是否仍然可用

我想知道这是否可能被第三方网站禁止?在我看来,它不应该,因为我不会下载任何内容。我想要的唯一信息是知道URL是否仍然有效


谢谢

当然,阻止这样的请求是可能的,问题是是否有人会介意。当然,如果请求是与第三方业务利益相关的线程,则可能会出现这种情况。和往常一样,在这种情况下:你们应该问他们……当然有可能阻止这样的请求,问题是是否有人会打扰你们。当然,如果请求是与第三方业务利益相关的线程,则可能会出现这种情况。像往常一样,在这种情况下:你应该问他们。。。