ruby - 使用 ruby​​ mechanize 抓取的数据大小

Question

agent = Mechanize.new
url = "---------------------------"
page = agent.get(url)

现在，我想知道我的互联网服务提供商用来抓取该数据的 KB（千字节）数据。

更具体地说，变量“page”的大小（KB）是多少？

Answer 1

page.content.bytesize / 1024.0

Answer 2

这真的是两件不同的事情。解压缩的响应正文的大小和传输的字节数。您可以通过检查获得第一个page.body，第二个您需要测量响应和请求标头以及考虑 gzip 和重定向等内容。更不用说dns查找等。