web-crawler - 使用网络爬虫检索相关的 url

Question

我正在使用 opensearchserver 来抓取网站。现在我想获取特定网址的所有相关网址。这个想法是当有人在网站上阅读文章时，他们会在页面底部获得相关文章选项。如何使用 opensearchserver 做到这一点？这甚至可能吗？如果没有，还有其他网络爬虫可以做这样的事情吗？

谢谢

Answer 1

对于很晚才开始对此回复感到抱歉。为此，您在爬虫中具有字段映射选项卡，但在您必须配置 shema 选项卡之前。选项卡名称解析器列表，列出每个可用的解析器。字段映射，您可以使用它填写您想要的所有字段。