6

我正在从命令行运行一个 ruby​​ 脚本。该脚本下载一个文件 (15 MB),将其解压缩,将其解析为 JSON,然后用它填充一个 mysql 数据库。

当我运行它时,我会收到一条简单的“Killed”消息。这是怎么回事?我怎样才能找出问题所在?

我在 EC2 微型实例上使用它。

谢谢

这是脚本

require 'open-uri'
require 'zlib'
require 'json'

require_relative '../db/db.rb'

dl = open('........')
ex = Zlib::GzipReader.new dl
json = JSON.parse ex.read
events = json['resultsPage']['results']['event']

puts "starting to parse #{events.count} event(s)..."
created = 0
updated = 0

events[1..10].each do |event|
    performances = event['performance']
    performances.each do  |performance|
        ar_show = Show.find_or_initialize_by_songkick_id performance['id']
        ar_show.artist_name = performance['displayName']
        ar_show.new_record? ? created += 1 : updated += 1
        ar_show.save!
    end
end

Import.create :updated => updated, :new => created
puts "complete. new: #{created}   -   updated: #{updated}"
4

1 回答 1

5

您几乎可以肯定内存不足,因为微型实例没有太多可用的内存或交换空间。我在 Perl 程序中遇到过这种情况。动态语言在处理大量数据时会占用大量内存。

测试这个理论的最好方法是在一个小时内启动一个小型或大型实例(这样您就不会为此付出太多)并在那里尝试脚本。如果它运行,您就知道微实例太小,您的程序无法在其上运行。

于 2012-12-21T15:13:54.303 回答