Java 连接到Web服务器时，是否可以检索所有文件的索引

连接到网站时，是否可以检索web服务器上所有文件的索引？ 类似于此图像的内容：

---

我知道你可以使用网络爬虫来达到类似的效果，但网站上可能有一些未列出的链接，它们是公开的，但不可见。有没有办法访问这些文件？

除非服务器配置为公开这样的列表。在许多情况下，从本质上讲，文件很少。资源是由服务器端例程处理的数据库记录，用于向浏览器提供HTML内容。

这取决于web服务器是否允许目录浏览/列表。