5

我正在尝试使用 xsltproc 解析一个长度为 13,00,000 行、大小为 56 MB 的输入 xml 文件。我收到以下错误：

input.xml:245393: parser error : internal error: Huge input lookup
              "description" : "List of values for possible department codes"
                          ^
unable to parse input.xml

我的 xsltproc 能够处理一个 9,30,000 行、大小为 48 MB 的 xml 文件。

事实上，我尝试通过删除不必要的部分将 xml 行减少到 600,000。不过，同样的错误，这很奇怪，因为它能够解析 900,000 但不能解析 600,000。

我该如何解决这个问题？

4

2 回答 2

2

根据以下代码段在 Python 中编写您自己的 xsltproc：

import argparse

from lxml import etree

parser = argparse.ArgumentParser()
parser.add_argument('stylesheet', help='XSLT style sheet', type=argparse.FileType('r', encoding='utf-8'))
parser.add_argument('input', help='XML input file(s)', nargs='*', type=argparse.FileType('r', encoding='utf-8'))
parser.add_argument('--output', help='The output file to create.', type=argparse.FileType('wb'))

args = parser.parse_args()

transform = etree.XSLT(etree.parse(args.stylesheet))

xml_parser = etree.XMLParser(huge_tree=True)

for xml in args.input:
    transform(etree.parse(xml, xml_parser)).write_output(args.output)

这使用了此答案中建议的lxml。

该huge_tree=True参数在 libxml2 中设置相应的解析器选项，从而使其能够处理大文件。有关详细信息，请参阅解析器选项。

于 2022-01-28T16:28:02.817 回答
0

使用 Oxygen XML Editor (Xalan) 解决了我的问题。

于 2020-01-22T14:42:45.990 回答