python - python，UnicodeEncodeError，将unicode转换为ascii

Question

首先，我对 python 很陌生，所以请原谅我所有的 n00b 东西。所以 Python 中的应用程序逻辑是这样的：

现在的问题是，那个 SQL 查询返回我的 unicode 字符串。select 的输出是这样的：

(u'Abc', u'Lololo', u'Fjordk\xe6r')

所以首先我试图将它转换为字符串，但它失败了，因为第三个元素包含这个德语“ae”字母：

for x in data[0]:
    str_data.append(str(x))

我得到： UnicodeEncodeError: 'ascii' codec can't encode character u'\xe6' in position 6: ordinal not in range(128)

我可以直接插入 unicode 以在发生 TypeError 时也插入。TypeError：强制转换为 Unicode：需要字符串或缓冲区，找到 NoneType

有任何想法吗？

score 7 · Accepted Answer

根据我的经验，Python 和 Unicode 通常是个问题。

一般来说，如果你有一个 Unicode 字符串，你可以像这样将它转换成一个普通的字符串：

normal_string = unicode_string.encode('utf-8')

并将普通字符串转换为 Unicode 字符串，如下所示：

unicode_string = normal_string.decode('utf-8')

score 4 · Accepted Answer

这里的问题是该str函数尝试使用ascii代码页转换 unicode，而ascii代码页没有映射u\xe6（æ - char reference here）。

因此，您需要将其转换为一些支持字符的代码页。现在最常用的是utf-8编码。

>>> x = (u'Abc', u'Lololo', u'Fjordk\xe6r')
>>> print x[2].encode("utf8")
Fjordkær
>>> x[2].encode("utf-8")
'Fjordk\xc3\xa6r'

另一方面，您可以尝试将其转换为cp1252 -支持它的西方拉丁字母：

>>> x[2].encode("cp1252")
'Fjordk\xe6r'

但是 Eeaster 欧洲字符集cp1250不支持它：

>>> x[2].encode("cp1250")
...
UnicodeEncodeError: 'charmap' codec can't encode character u'\xe6' in position 6: character maps to <undefined>

python中的unicode问题很常见，我建议如下：

2 回答 2