在另一个Web服务器上测试网站-无谷歌搜索引擎优化

我在生产服务器上有一个网站，我对该网站进行了更改，我想在另一个Web服务器上进行测试

---

有没有办法避免谷歌在测试网站上的搜索引擎优化。可能在web.config中安装

它的工作原理是这样的：比如说，一个机器人想要访问一个网站的URL。在这样做之前，它首先检查

因此，如果你想禁止所有的搜索引擎，那么就在你的Web服务器上上传robots.txt文件。 并包括以下代码：

User-agent: *
Disallow: /

这将阻止所有搜索引擎爬行

以及何时将其放在生产服务器上。将代码更改为（在robots.txt文件中）：

还包括一个sitemap.xml文件。

---

请记住，“用户代理：*”表示此部分适用于所有机器人。“Disallow:/”告诉robot它不应该访问站点上的任何页面。

在robot.txt文件中使用这段代码：

User-agent: *
Disallow:

Sitemap: http://www.yourdomainname.com/sitemap.xml

User-agent: *
Disallow: /

这将阻止搜索引擎抓取您的网页