Apache 正在web服务器上获取特定页面/目录的子页面

我正在寻找一种方法来查看保存在web服务器上任何目录中的所有子页面。例如，如果我有一个页面abc.com/directorA/directoryB，我是否可能以某种方式获取此子页面下的所有页面和目录？或者，只有当服务器有类似于该目录的索引站点时，这才可能实现吗？

将其放入httpd.conf中

<Directory "/srv/www/htdocs/directorA"> 
    Options +Indexes 
    Order allow,deny 
    Allow from all 
</Directory>

只有当网站管理员决定展示它时，才有可能。

---

否则robot.txt就存在了，因为它还解释了机器人可以去哪里。但是这些文件是由网站管理员制作的，因此只有管理员才能显示。

您可以使用Visio 2013或更旧的版本来实现这一点

选择“新建文件Visio搜索联机模板”时，可以根据选择形状网站地图和概念网站

---

选择网站地图，按照向导操作并输入您选择的URL。

谢谢，但我是指任何网站，即我正在在线浏览的网站，不幸的是；，没有任何服务器配置访问权限。i、 例如，如果我想要一个所有页面、子目录等的列表，比如说，CNN.com，这是可能的，只是浏览访问它，或者以某种方式进行编程，但仍然只能从实际服务器之外？尝试从域名捕获robot.txt，大多数时候它们都位于网页的根目录中。我想你会说德语。。但无论如何，这意味着你不能访问这个目录。在这个文本文件中，只写了哪些目录可以存在，以及如何为机器人节省时间和信息。想象一下，你可能会在facebooks服务器目录中跌跌撞撞^^hmm，robots.txt只包含不允许，不幸的是也不允许：/*？。我想这不会让我走得更远^^