1

我有一些数据要从数据库导出并保存为 CSV 文件,然后上传到 FTP 服务器。该站点托管在 Heroku 上,我知道您只能写入 tmp(或 log?)目录。

这在我的本地机器上很好用,但在 Heroku 上不起作用。

这是我的 rake 任务:

require 'csv' 
require 'net/ftp'

task :export_data => :environment do
  path = "tmp/" 
  filename = 'test_' + Date.today.to_s + '.dat' 

  messages = Message.where( :foo => bar) 
  CSV.open(path + filename, "wb", :col_sep => '|') do |csv| 

    messages.each do |m| 
      csv << [m.id.to_s, m.name] 
      puts "Processing message " + m.id.to_s 
    end 
  end 

  puts "Uploading " + filename 
  ftp = Net::FTP.new('ftp.hostname.com') 
  ftp.login(user = "******", passwd = "*******") 
  ftp.puttextfile(path + filename, filename) 
  ftp.quit() 

  puts "Finished." 
end

有2个问题:

Q1。遍历记录非常慢。5分钟200。不知道能不能用。

Q2。ftp 出错并崩溃。它开始将文件放在 FTP 服务器上,但不向其中写入任何数据。它是一个空文件。日志内容如下:

Starting process with command `rake jobs:work`
2011-10-17T21:17:11+00:00 app[worker.1]: (in /app)
2011-10-17T21:17:13+00:00 heroku[worker.1]: State changed from starting to up
2011-10-17T21:17:13+00:00 app[worker.1]: rake aborted!
2011-10-17T21:17:13+00:00 app[worker.1]: Don't know how to build task 'jobs:work'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:1720:in `[]'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2040:in `invoke_task'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2019:in `block (2 levels) in top_level'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2019:in `each'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2019:in `block in top_level'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2058:in `standard_exception_handling'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:2013:in `top_level'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/lib/ruby/1.9.1/rake.rb:1992:in `run'
2011-10-17T21:17:13+00:00 app[worker.1]: /usr/ruby1.9.2/bin/rake:31:in `<main>'
2011-10-17T21:17:13+00:00 heroku[worker.1]: Process exited
2011-10-17T21:17:14+00:00 heroku[worker.1]: State changed from up to crashed

文件不可用或文件系统有其他问题吗?在本地机器上工作。

有任何想法吗?

谢谢。

4

2 回答 2

2

答案在

2011-10-17T21:17:13+00:00 app[worker.1]: Don't know how to build task 'jobs:work'

出于某种原因,您的 Rakefile 不知道工作:工作。考虑到这是一个delayed_job 任务,你确定你已经正确覆盖了delayed_job 安装的每一步吗?

您是否在生产模式下在本地尝试过这个?

于 2011-10-18T10:17:33.907 回答
1

答案:

Q1:不慢。它只是看起来很慢,因为缓慢的部分正在输出到控制台。

Q2:通过设置修复了 FTPftp.passive = true

于 2011-11-06T15:45:37.523 回答