我希望从 Google 搜索结果中下载 url 列表。基本上，我有一个搜索查询“site:www.mywebsite.com”，它返回了 6,500 个结果。我需要所有这些结果的 url。我知道有很多方法可以获得前 1,000 个（这是 google 的限制），但我需要全部 6,500 个结果。
有没有办法做到这一点，如果有，怎么做？可以通过 Google 的 CustomSearch API 完成吗？
对此的任何帮助将不胜感激。
我希望从 Google 搜索结果中下载 url 列表。基本上，我有一个搜索查询“site:www.mywebsite.com”，它返回了 6,500 个结果。我需要所有这些结果的 url。我知道有很多方法可以获得前 1,000 个（这是 google 的限制），但我需要全部 6,500 个结果。
有没有办法做到这一点，如果有，怎么做？可以通过 Google 的 CustomSearch API 完成吗？
对此的任何帮助将不胜感激。