Mod rewrite Mod重写的页面没有被搜索引擎索引，我是否编码错误？

我最近在我的网站上添加了一些mod rewrite规则，它们的功能完全符合我的需要，但在多次爬网后，谷歌或必应都找不到这些页面。我还使用了一个站点地图生成器，它也找不到我的修改过的页面

我已经做了一些关于我可能做错了什么的搜索，但是没有找到任何能掩盖我所经历的事情

我在google网站管理员工具中使用了fetch工具，它说它没有找到该页面，但它确实显示了该页面的源代码，正确的页面

你知道我错过了什么吗

干杯，

---

Frank

我忘了添加，我已经输入了正确的标题和元标记。状态代码不是200？你的

robots.txt

有没有可能限制访问重写的URL？@aefxx我还没有对它做任何修改用户代理：*不允许：@KingCrunch谷歌说robots.txt文件的状态是200，这就是你所说的地位吗？