Javascript 抓取500个不存在的URL'；s

谷歌爬网为不存在的页面抛出服务器错误，这些页面是从不存在的页面链接而来的

例如：

链接自：

此URL的结构和分页在我们的网站上从未存在过！ 有人知道这些链接的来源和修复方法吗

我有很多这样的链接，请帮我解决

tnx，

---

莉娜

它来自一个脚本

// visitorlp - The user first landing page
googletag.pubads().setTargeting("visitorlp", "http://www.dailyforex.com/forex-technical-analysis/forex-blog-reviews/page-506");

---

它来自一个脚本

// visitorlp - The user first landing page
googletag.pubads().setTargeting("visitorlp", "http://www.dailyforex.com/forex-technical-analysis/forex-blog-reviews/page-506");

---

他们可能会抓取不存在的url的原因很多。您应该更关心为什么它会导致500个服务器错误很多原因他们可能会抓取不存在的url。您应该更关心它为什么会导致500服务器错误，请您解释一下。这是你的剧本吗？或者你在哪里找到的？否则，你为什么认为这是来源？@Thomas，这不是我的剧本。它是包含在页面中的脚本行。这与谷歌GPT的一些配置有关。你可以在浏览器的开发者控制台上找到它。@JoséPaiva这个链接怎么样：它也有来自page-82/page-85的链接，但在源代码中没有提到google标记。在我们检查之后，它不是google的问题，仍然是一个谜。你介意解释一下吗。这是你的剧本吗？或者你在哪里找到的？否则，你为什么认为这是来源？@Thomas，这不是我的剧本。它是包含在页面中的脚本行。这与谷歌GPT的一些配置有关。你可以在浏览器的开发者控制台上找到它。@JoséPaiva这个链接怎么样：它也有来自page-82/page-85的链接，但在源代码中没有提到谷歌标签。我们检查过之后，它不是谷歌的问题，仍然是个谜