Facebook对Beso.com的攻击如此之大,以至于严重影响了网站的性能;我们如何让FB控制它的爬行?

Facebook对Beso.com的攻击如此之大,以至于严重影响了网站的性能;我们如何让FB控制它的爬行?,facebook,screen-scraping,bots,web-crawler,Facebook,Screen Scraping,Bots,Web Crawler,我们的网站Beso.com每月有3毫米的紫外线,已经开始每天多次受到Facebook的爬虫/刮板的攻击,导致我们网站的性能严重下降。我们最近实施了开放图,并鼓励在我们的网站上以及Facebook Connect上进行大量的分享和喜爱 我知道FB需要访问我们的网站来获取信息,但我们迫切需要他们来降低爬行速度,否则我们将被迫完全阻止它。这不是我们希望采用的解决方案 在这个网站上,是否有来自FB的任何人可以将我们与适当的团队成员联系起来,或者有来自某个已建立的网站的任何人以前曾与这个问题进行过斗争 谢

我们的网站Beso.com每月有3毫米的紫外线,已经开始每天多次受到Facebook的爬虫/刮板的攻击,导致我们网站的性能严重下降。我们最近实施了开放图,并鼓励在我们的网站上以及Facebook Connect上进行大量的分享和喜爱

我知道FB需要访问我们的网站来获取信息,但我们迫切需要他们来降低爬行速度,否则我们将被迫完全阻止它。这不是我们希望采用的解决方案

在这个网站上,是否有来自FB的任何人可以将我们与适当的团队成员联系起来,或者有来自某个已建立的网站的任何人以前曾与这个问题进行过斗争


谢谢。

Facebook每天会清理一次打开的图形对象。我能想到两个可能的原因,一个网站会被过度刮伤

1) 您有一个实现开放图形操作的应用程序。创建该应用程序的程序员意外地将scrape可选参数永久设置为true。请看这里:


2) 一个页面(应该是一个打开的图形对象)有多个URL,这样Facebook就会一遍又一遍地重新抓取相同的内容。

你应该加入这个bug报告,