Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/search/2.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Search 使用开放式搜索服务器抓取受STS保护的站点_Search_Open Source_Search Engine - Fatal编程技术网

Search 使用开放式搜索服务器抓取受STS保护的站点

Search 使用开放式搜索服务器抓取受STS保护的站点,search,open-source,search-engine,Search,Open Source,Search Engine,我已经配置了,它在所有打开的站点上都可以正常工作。但我无法抓取用于身份验证的受保护站点。我已经为网络爬虫指定了所有身份验证参数(模式、用户名和密码),但它不是爬虫 如何使用Open Search Server web crawler对受STS保护的网站进行爬网?OpenSearchServer的身份验证模块支持以下协议: 基本HTTP身份验证 摘要HTTP身份验证 Kerberos 可以开发额外的实现。作为开源软件,您可以通过这样做或向社区寻求在线帮助来做出贡献

我已经配置了,它在所有打开的站点上都可以正常工作。但我无法抓取用于身份验证的受保护站点。我已经为网络爬虫指定了所有身份验证参数(模式、用户名和密码),但它不是爬虫


如何使用Open Search Server web crawler对受STS保护的网站进行爬网?

OpenSearchServer的身份验证模块支持以下协议:

  • 基本HTTP身份验证
  • 摘要HTTP身份验证
  • Kerberos
可以开发额外的实现。作为开源软件,您可以通过这样做或向社区寻求在线帮助来做出贡献