Php 拉韦尔路及；crwling问题

我们有一个生产营销应用程序，其路线如下

/工具/资讯科技管理

及

/解决方案/产品比较

等等

问题是MOZ和Google crawler在索引/tools和/solution时，它们既不是目录也不是索引页。作为回报，我们得到了一系列404错误

---

是否有人可以建议在不影响使用上述示例/tools的管线视图的情况下禁用：/tools？

尝试添加或编辑不允许使用此文件夹的robots文件：请澄清，它不是文件夹，只是路由到Laravel视图。没有物理目录。另一个问题是，在/tools下，我们有大约15页。禁用/工具不会禁用路由？添加禁止：/tool不会影响所有虚拟文件夹，即使虚拟文件夹也可能被禁止。。您还可以从请求头中检测用户代理以在代码中执行某些操作。。为了进行测试，有一个不错的Chrome添加到切换用户代理和假装谷歌机器人。。