4

今天我可以将一些相当古老的 perforce 存储库迁移到 git。虽然这真的很有趣,但有一件事引起了我的注意。提交消息中的所有特殊字符,甚至作者姓名都不是正确的编码。

所以我试图调查问题来自哪里。

  • 首先 perforce 服务器不支持 unicode,所以设置 P4CHARSET 没有效果,但是Unicode clients require a unicode enabled server.
  • 然后我检查了简单命令的输出,例如p4 usersANSI 中确实存在的位置(根据file -bi重定向输出咨询 notepad++ 或 ISO-8859-1)
  • locale命令说 LANG=en_US.UTF-8 ...

毕竟我的猜测是所有 p4 客户端输出都在 ISO-8859-1 中,但 git-p4 假定为 UTF-8。

我尝试用重写提交消息

git filter-branch --msg-filter 'iconv -f iso-8859-1 -t utf-8' -- --all

但这并不能解决问题,特别是因为它不打算重写作者姓名。

任何人都猜测如何在 git-p4 接收它们之前强制将输出转换为 UTF-8?

更新:

我尝试使用添加到 PATH 的简单 shell 脚本“覆盖”默认的 p4 命令输出

/usr/bin/p4 $@ | iconv -f iso-8859-1 -t utf-8

但这破坏了明显使用的编组 python 对象:

  File "/usr/local/bin/git-p4", line 2467, in getBranchMapping
    for info in p4CmdList(command):
  File "/usr/local/bin/git-p4", line 480, in p4CmdList
    entry = marshal.load(p4.stdout)
ValueError: bad marshal data

更新2:

如此处所见更改 Python 的默认编码?我试图将python编码设置为ascii:

export export PYTHONIOENCODING="ascii"
python -c 'import sys; print(sys.stdin.encoding, sys.stdout.encoding)'

输出:

('ascii', 'ascii')

但仍然没有正确迁移所有消息和作者。

更新 3:

即使尝试修补 git-p4.pydef commit(self, details, files, branch, parent = "")功能也无济于事:更改

self.gitStream.write(details["desc"])

对其中之一

self.gitStream.write(details["desc"].encode('utf8', 'replace'))
self.gitStream.write(unicode(details["desc"],'utf8')

刚刚提出:

UnicodeDecodeError: 'ascii' codec can't decode byte 0xc4 in position 29: ordinal not in range(128)

因为我不是 python 开发人员,所以我不知道接下来要尝试什么。

4

1 回答 1

1

我怀疑的类型details["desc"]是字节字符串。(python2 的字符串)。

因此,您需要decode先将其转换为 Unicode encode

print type(details["desc"])

找出类型。

details["desc"].decode("iso-8859-1").encode("UTF-8")

可能有助于从 iso-8859-1 转换为 UTF-8。

于 2015-05-14T10:43:53.920 回答