search - 使用 Open Search Server 抓取受 STS 保护的站点

Question

我已经配置了Open Search Server，它适用于所有打开的站点。但我无法抓取使用安全令牌服务 (STS)进行身份验证的受保护站点。我已经为网络爬虫指定了所有身份验证参数（模式、用户名和密码），但它没有爬取。

如何使用 Open Search Server 网络爬虫来爬取受 STS 保护的网站？

Answer 1

OpenSearchServer 的认证模块支持以下协议：

• 基本 HTTP 身份验证
• 摘要 HTTP 身份验证
• Kerberos

可以开发其他实现。作为开源软件，您可以通过做贡献或在OpenSearchServer SourceForge 项目上向社区寻求帮助。