Proxy googlebot在使用代理时是否可以有http头

Proxy googlebot在使用代理时是否可以有http头,proxy,http-headers,googlebot,Proxy,Http Headers,Googlebot,我想防止在网站上使用代理:我知道,如果使用匿名代理,它永远不会那么可靠。。无论如何,我想检查以下标题是否存在 HTTP_CLIENT_IP: HTTP_FORWARDED: HTTP_X_FORWARDED_FOR: HTTP_VIA: HTTP_PROXY_CONNECTION: HTTP_X_PROXY_ID 并禁止该ip地址,如果至少存在一个。但我担心谷歌机器人和其他搜索引擎在爬行时是否会有这样的标题:不要意外地禁止谷歌。因此,在请求为网站编制索引时,问题是SE,特别是googlebot

我想防止在网站上使用代理:我知道,如果使用匿名代理,它永远不会那么可靠。。无论如何,我想检查以下标题是否存在

HTTP_CLIENT_IP:
HTTP_FORWARDED:
HTTP_X_FORWARDED_FOR:
HTTP_VIA:
HTTP_PROXY_CONNECTION:
HTTP_X_PROXY_ID
并禁止该ip地址,如果至少存在一个。但我担心谷歌机器人和其他搜索引擎在爬行时是否会有这样的标题:不要意外地禁止谷歌。因此,在请求为网站编制索引时,问题是SE,特别是googlebot是否可以拥有上述标题之一


谢谢

我没有关于其他搜索引擎的信息,但对谷歌来说似乎没有