Web scraping 用站点用户IP刮谷歌

Web scraping 用站点用户IP刮谷歌,web-scraping,serp,Web Scraping,Serp,最近,我一直在花时间阅读有关在取消SERP时防止被谷歌禁止的最佳方法。我想分享我对这一点的看法,并根据我关于如何防止被禁止的想法提出问题。如果您有任何建议或贡献可以帮助我,请在下面留下您的评论。我会很感激的。我打算用PHP实现这一点 我的想法是在我的每个站点用户注册时获取他们的IP地址,每次登录时,我也会获取他们的IP地址,并将其存储在我的数据库中,前提是与注册时使用的IP地址不同。这将使每个用户能够直接用他们的IP刮谷歌,我不需要任何代理服务。现在的问题是,如果他们滥用它,他们可能会被谷歌屏蔽

最近,我一直在花时间阅读有关在取消SERP时防止被谷歌禁止的最佳方法。我想分享我对这一点的看法,并根据我关于如何防止被禁止的想法提出问题。如果您有任何建议或贡献可以帮助我,请在下面留下您的评论。我会很感激的。我打算用PHP实现这一点

我的想法是在我的每个站点用户注册时获取他们的IP地址,每次登录时,我也会获取他们的IP地址,并将其存储在我的数据库中,前提是与注册时使用的IP地址不同。这将使每个用户能够直接用他们的IP刮谷歌,我不需要任何代理服务。现在的问题是,如果他们滥用它,他们可能会被谷歌屏蔽。我想让脚本自动为他们完成任务会很好。他们只需要提交他们的URL,而我的脚本在后台进行抓取。它将每天为每个用户的IP刮谷歌10次。每天10次相当于每个用户10个URL,结果保存在数据库中。这也意味着每个链接的SERP将每10天进行一次刮取和更新

现在我的问题是:

  • 有人试过这种方法吗
  • 它起作用了吗?如果有,你的方法是什么
  • 你有没有一个例子,我可以看看如何设置登录用户IP地址,以屏蔽我的IP被谷歌看到的想法
  • 如果不行,你能解释一下原因吗
  • 有没有法律禁止这种行为
  • 涉及哪些风险
  • 感谢您的阅读和评论。谢谢你抽出时间


    Kelly。

    这将不起作用,因为谷歌将向你的用户发送回复

    甚至你的请求也可能无法到达谷歌服务器,因为路由器会将它们作为假IP请求丢弃


    您将需要代理服务器-您可以尝试查找免费代理或搜索搜索引擎优化的付费代理-在谷歌搜索
    “搜索引擎优化代理谷歌”

    答案是正确的,不过,要想找到有效的解决方案,请看这里:要使用用户IP,您需要克服浏览器内部的跨站点脚本防御,否则他们必须安装一个插件/app/program/extension。如果你能让他们安装一个扩展,它将通过你的想法。