0

我正在抓取一个包含项目列表的主页。在我的管道中，我连接到数据库来存储项目。我的下一个任务是转到每个单独的项目页面并抓取评论。我需要再次连接到数据库，看看我是否已经刮掉了评论。

我在管道中还是在爬网脚本中连接到数据库更有效？
有没有办法从管道中返回并告诉爬虫爬取评论？

4

0 回答 0