Google plus 谷歌+爬虫

Google plus 谷歌+爬虫,google-plus,Google Plus,目前,我的公司正在尝试向我们的网站添加Google Plus One链接 我们有工作的代码,但它似乎是谷歌+爬虫无法访问页面内容。创建共享链接片段时,它会呈现一条消息,说明爬虫程序无法查看内容,因为它未能通过区分机器人程序和人类访问者的测试 我们可以将bot列为白名单,但是我们使用的系统只接受一个用户代理和一个URL。当检测到用户代理时,将运行反向查找,并将bot ip与输入的url进行比较,以查看它是否来自同一组ip 我知道Google Plus爬虫程序不使用机器人式的用户代理,如Mozill

目前,我的公司正在尝试向我们的网站添加Google Plus One链接

我们有工作的代码,但它似乎是谷歌+爬虫无法访问页面内容。创建共享链接片段时,它会呈现一条消息,说明爬虫程序无法查看内容,因为它未能通过区分机器人程序和人类访问者的测试

我们可以将bot列为白名单,但是我们使用的系统只接受一个用户代理和一个URL。当检测到用户代理时,将运行反向查找,并将bot ip与输入的url进行比较,以查看它是否来自同一组ip

我知道Google Plus爬虫程序不使用机器人式的用户代理,如Mozilla/5.0(兼容;Googlebot/2.1;+),但是否有一个用户代理可以对其执行必要的白名单测试?

是的。用户代理包含以下字符串:

Google (+https://developers.google.com/+/web/snippet/)

这是用户代理为我返回的内容:

Mozilla/5.0(Windows NT 6.1;rv:6.0)Gecko/20110814 Firefox/6.0 Google (+)


这是用户代理为我返回的内容: Mozilla/5.0(Windows NT 6.1;rv:6.0)Gecko/20110814 Firefox/6.0 Google(+)