web-scraping - 如何找出网站上的“趋势”我也无权访问

Question

在一个论坛上，我有一个新闻部分，成员发布新闻。似乎每天都有关于苹果的文章，有人请愿删除苹果的文章，因为每天都是同样的故事。每个论坛部分都有一个 RSS 提要。

这让我觉得看到当天网站上的新闻报道趋势会很酷，但我被困住了，因为我没有任何访问数据库或后端的权限，因为我是普通用户。谁能想到我可以实现这一目标的方法？

我有一个服务器，我可以在上面托管结果。

Answer 1

该网站是否有 API 或 RSS 提要？

如果不是，您只能使用具有站点所有者权限的内容来阅读file_get_contents($url)。