1

我正在尝试使用import.io来爬取电子商务网站并收集各种定价信息。但是,每种产品的价格是由用户设置的众多下拉菜单决定的。

网站链接:http: //www.saxoprint.co.uk/shop/brochures

我需要爬虫浏览所有不同的选项并收集与该产品相关的所有可能的定价组合。我最初尝试使用 Chrome 的网络爬虫插件,但发现此扩展不支持一个页面内的多个点击操作。

我认为 import.io 可以做到这一点,但我可能错了。有谁知道如何收集这些数据,即使它是 import.io 的替代品?

谢谢...

4

1 回答 1

1

不幸的是,使用 import.io 工具无法浏览所有不同的选项。通过导入,您需要手动将所有这些不同的选项关联为输入。我通过编写一个可以循环遍历所有可能选项并写出该数据的 python 脚本在类似的电子商务网站上取得了成功。

谢谢,
梅格

于 2015-08-21T09:11:43.800 回答