php - Google 新闻机器人是如何工作的？

Question

我正在使用 Symfony2 构建一个新项目，我需要将一些文章从网络上的几个网站拉到我的网站上。我知道我必须小心如何显示这些信息，但这不是重点。

我的问题是，我怎样才能建造一个拾取这些文章的机器人？然后，我想，我将不得不在我的代码中审查它并过滤那些带有标签、标题或关键词的文章。

我应该使用哪种技术？我可以用 php 做到这一点吗？我需要什么 ？哪些知识？我应该使用 RSS 吗？答案越准确（如果你有参考资料）越好！

谢谢

Answer 1

它本质上与搜索引擎相同，只是对新闻网站进行了一些调整。Udacity提供有关搜索引擎基础知识的课程，因此您可以从那里开始。