1

首先,这不是这里这个SO 问题的重复。我有一个 csv 文件编码在Shift-JIS 这是我的脚本来解析文件

require 'csv'
str1 = '社員番号'
str2 = 'メールアドレス'
str1.force_encoding("Shift_JIS").encode!
str2.force_encoding("Shift_JIS").encode!
file=File.open("SyainInfo.csv", "r:Shift_JIS")
csv = CSV.read(file, headers: true)
p csv[str1]
p csv [str2]

但即使在指定编码之后,我也得到了invalid byte sequence in UTF-8 (ArgumentError). 有什么想法吗?我的红宝石是 2.3.0

4

1 回答 1

3

首先,您的编码看起来不正确:

'社員番号'.force_encoding("Shift_JIS").encode!
#=> "\x{E7A4}\xBE\x{E593}\xA1\x{E795}\xAA\x{E58F}\xB7"

force_encoding从中获取字节str1并将它们解释为 Shift JIS,而您可能希望字符串转换为 Shift JIS:

'社員番号'.encode('Shift_JIS')
#=> "\x{8ED0}\x{88F5}\x{94D4}\x{8D86}"

接下来,您可以将文件名传递给CSV.read, 所以而不是:

file = File.open(filename)
CSV.read(file)

你可以写:

CSV.read(filename)

也就是说,您可以使用 Shift JIS 编码的字符串:

require 'csv'
str1 = '社員番号'.encode("Shift_JIS")
str2 = 'メールアドレス'.encode("Shift_JIS")
csv = CSV.read('SyainInfo.csv', encoding: 'Shift_JIS', headers: true)
csv[str1]
csv[str2]

或者——这就是我要做的——你可以通过指定第二个编码来处理 UTF-8 字符串:

require 'csv'
str1 = '社員番号'
str2 = 'メールアドレス'
csv = CSV.read('SyainInfo.csv', encoding: 'Shift_JIS:UTF-8', headers: true)
csv[str1]
csv[str2]

encoding: 'Shift_JIS:UTF-8'指示CSV读取 Shift JIS 数据并将其转码为 UTF-8。相当于传递'r:Shift_JIS:UTF-8'File.open

于 2016-09-15T11:31:07.150 回答