如何在PHP项目中阻止robots.txt？

在PHP项目中，阻止和删除这个恼人的robots.txt文件的最佳方法是什么？

该

robots.txt

文件是由网站开发人员创建的。该文件所做的只是指示像谷歌或雅虎这样的机器人，他们应该和不应该在你的网站上为他们的搜索引擎编制索引。他们决不一定要按照指示去做，但大多数大公司都是这样做的

如果您想告诉所有机器人不要搜索任何东西，并试图阻止它们，请在

robots.txt

文件中输入以下内容

User-agent: *
Disallow: /

就像我说的，这不是机器人必须遵循的，但是所有好的机器人都会这么做

---

这里有更多信息

你说的“阻止并删除”是什么意思？robots.txt只是一个指导搜索引擎如何为站点编制索引的文件。它通常不受PHP的影响，当然也不需要PHP？这对我来说是个新闻Malbe我的问题不清楚。但出于某种原因，我不想让每个机器人都阻止一些垃圾邮件发送者使用它扫描或滥用带宽。这与PHP无关……我只想阻止某些被滥用的机器人。谢谢你的链接！