Php 如何构造webdev文件夹，使站点不被Google索引？

我如何构建我的web开发环境，使搜索引擎不会为我的项目编制索引

我正在为不同的客户进行许多项目，每个客户的网站位于www.mydomain.com/webdev/des1、www.mydomain.com/webdev/des2、www.mydomain.com/webdev/des3等

我用这种方式构建了它，但我今天在谷歌上发现，它一直在为正在开发中的客户网站编制索引，因此还没有准备好发布

我能做些什么从google结果中删除这些网站，直到它们完成，以及如何构建我的开发环境，以便将来不会发生这种情况？我很抱歉在这里问两个问题，但我真的需要犯同样错误的人的紧急建议

我如何构建我的web开发环境，使搜索引擎不会为我的项目编制索引

不允许公众匿名/访客访问

---

在你的情况下，由于偶然，你已经启动了这些网站。现在你可以试着联系谷歌，让他们再次从索引中删除它。他们还将告诉你如何在未来防止这种情况。这是他们帮助页面的一部分。寻找站长资源。

我知道这不是一个理想的修复方案，但为了使网站不可访问，我使用了一个不允许人们访问网站的插件。在为当前和未来的项目重新构建web开发环境之前，我将使用这种方法。谢谢大家的帮助和建议

# Disallow access for all robots on all pages
User-agent: *
Disallow: /

---

但正如allready所说，它只会阻止机器人，也只会阻止那些遵守robots.txt协议的机器人。即使你用这个阻止了谷歌机器人，你的URL仍然可能在搜索引擎中被索引，尽管在代码片段中看不到标题或描述。然而，正如allready建议的那样，您应该使用某种密码保护。

RTLM：如果它正在开发中，您应该以任何方式保护它。永远不要将“开发中”的内容公开。@MarcB谢谢你的回复。请您解释一下关于robotstxt.org的第一部分是什么意思？我需要做什么？还有，我应该把所有东西移到哪里？R代表阅读…@MarcB你能添加第一条评论作为答案吗？这样我就可以选择它作为正确的答案了？谢谢你的帮助