ruby-on-rails - 带有 httparty 的反机器人系统请求站点的问题

Question

我在使用 httparty gem 请求网站时遇到问题：反机器人系统用一些无聊的东西回应我）httparty 是否有任何标准方法来更改请求标头（我的意思是 UserAgent 等）？还是可以以其他方式完成？

Answer 1

前段时间我通过使用内置用户代理和 cookie 支持的mechanize gem 解决了这个问题。

快速示例：

require 'rubygems'
require 'mechanize'

a = Mechanize.new { |agent|
  agent.user_agent_alias = 'Mac Safari'
}

a.get('http://google.com/') do |page|
  search_result = page.form_with(:name => 'f') do |search|
    search.q = 'Hello world'
  end.submit

  search_result.links.each do |link|
    puts link.text
  end
end