4

当我试图用来pycparser解析带有注释的文件时,我得到了 ParseError

import pycparser
parser = pycparser.CParser()
parser.parse("int main(void){return 0;}")
parser.parse("/* comment */ int main(void){return 0;}")


Traceback (most recent call last):
File "test_pycparser.py", line 18, in <module> parser.parse("/* comment */ int main(void){return 0;}")
File "build\bdist.win32\egg\pycparser\c_parser.py", line 124, in parse
File "build\bdist.win32\egg\pycparser\ply\yacc.py", line 265, in parse
File "build\bdist.win32\egg\pycparser\ply\yacc.py", line 1047, in parseopt_notrack
File "build\bdist.win32\egg\pycparser\c_parser.py", line 1423, in p_error
File "build\bdist.win32\egg\pycparser\plyparser.py", line 54, in _parse_error
pycparser.plyparser.ParseError: :1:1: before: /

解决方案pycparser在当前版本中不支持源代码中的注释,但是这个 fork允许它,或者您可以使用问题Python 片段中的配方来删除 C 和 C++ 注释以从源代码中删除注释。

import pycparser
import re
def comment_remover(text):
    def replacer(match):
        s = match.group(0)
        if s.startswith('/'):
            return ""
        else:
            return s
    pattern = re.compile(
        r'//.*?$|/\*.*?\*/|\'(?:\\.|[^\\\'])*\'|"(?:\\.|[^\\"])*"',
        re.DOTALL | re.MULTILINE
    )
    return re.sub(pattern, replacer, text)

parser = pycparser.CParser(keep_comment=True)
parser.parse("int main(void){return 0;}")
parser.parse("/* comment */ int main(void){return 0;}")
parser_2 = pycparser.CParser()
parser.parse(comment_remover("/* comment */ int main(void){return 0;}"))
4

1 回答 1

9

实际上,pycparser 不会解析注释或与 C 预处理器相关的任何内容(在常规 C 编译器中,预处理器会在编译器看到注释之前将其剥离)。

要阻止注释弄乱您的解析,请首先通过预处理器运行代码,如 pycparser 中所建议的那样README。不幸的是,要真正有意义地解析评论(并获取其内容),pycparser 不是正确的工具。

于 2013-11-16T23:04:35.407 回答