2

我正在解析从 FTP 站点提取的 CSV 文件。我想解析 CSV 并提取一些特定字段以存储在数据库中。我遇到了一些我不理解的编码,我相信 CSV.parse 也不期待编码:

filename = "#{RAILS_ROOT}/spec/files/20120801.01.001.CSV"
filestream = File.new(filename, "r")
while (line = filestream.gets)
  puts "line: #{line}"
  CSV.parse(line) do |row|
    case row[0]
    when "RH"
     # do something
    when "SH"
     #do something else
    end
  end
end

CSV 文件中的第一行如下所示:

"\376\377\000\"\000R\000H\000\"\000,\0002\0000\0004\0005\000/\0000\0008\000/\0000\0002\000 \0000\0005\000:\0005\0007\000:\0002\0001\000 \000-\0000\0007\0000\0000\000,\0002\0000\0001\0002\000/\0000\0008\000/\0000\0001\000 \0000\0000\000:\0000\0000\000:\0000\0000\000 \000-\0000\0004\0000\0000\000,\0002\0000\0001\0002\000/\0000\0008\000/\0000\0001\000 \0002\0003\000:\0005\0009\000:\0001\0004\000 \000-\0000\0007\0000\0000\000,\000\"\000Y\0003\000B\0003\0003\000Z\000N\000K\000A\000U\000B\000H\000N\000\"\000,\0000\0000\0001\000,\000\n"

我有一个我自己创建的不同 CSV 文件,它打印为人类可读的文本。我在这里想念什么?在传递给 CSV.parse 之前,我是否需要对 CSV 字符串应用一些编码。

这是堆栈跟踪:

CSV::IllegalFormatError
/Users/project/app/models/parse_csv.rb:5:in `parse'

我现在被迫使用 ruby​​ v1.8.7。

我知道我可以使用 CSV.open,但我故意尝试提供 CSV.parse 一个 IO 流,以便我可以使用 SFTP 从 FTP 站点获取 CSV 文件,将文件流式传输到内存中,而无需存储 CSV 文件到磁盘:

 sftp.open_handle("/path/to/remote.file") do |handle|     
      data = sftp.read(handle)   
   end

提前感谢您的任何想法!

4

1 回答 1

2

该行中有可能需要转义的双引号。我在 ruby​​-forum.com 上找到了这个

这只是一个猜测,但也许您可以尝试用单引号替换每个前面或后面没有逗号的双引号字符?类似于下面未经测试的代码:

line.gsub(/[^,]"[^,]/,"'")

它可能需要先读取整个文件,写出一个更正的版本,然后在上面调用 CSV 方法,但它比手动完成要好:)。

另外,顺便说一句,我认为而不是

while (line = filestream.gets)

你可以做

filestream.gets.each_line do |line|

哪个可能更红宝石(也许?)

于 2012-08-03T03:23:52.007 回答