1

我正在为学校做一个项目。我们正在制作一个静态代码分析器。对此的要求是分析 Java 中的 C# 代码，到目前为止，ANTLR 的表现非常好。

我制作了一些示例 C# 代码以在 Visual Studio 中使用 ANTLR 进行扫描。我分析了解决方案中的每个 C# 文件。但它不起作用。我收到内存泄漏和错误消息：

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
    at org.antlr.runtime.Lexer.emit(Lexer.java:151)
    at org.antlr.runtime.Lexer.nextToken(Lexer.java:86)
    at org.antlr.runtime.CommonTokenStream.fillBuffer(CommonTokenStream.java:119)
    at org.antlr.runtime.CommonTokenStream.LT(CommonTokenStream.java:238)

过了一会儿，我认为这是编码的问题，因为所有文件都是 UTF-8。我认为它无法读取编码的流。所以我打开了记事本++，我把每个文件的编码都改成了ANSI，然后就可以了。我不太明白 ANSI 是什么意思，这是一个字符集还是某种组织？

我想将编码从任何编码（可能是 UTF-8）更改为这种 ANSI 编码，这样我就不会再出现内存泄漏了。

这是制作 Lexer 和 Parser 的代码：

InputStream inputStream = new FileInputStream(new File(filePath));
CharStream charStream = new ANTLRInputStream(inputStream);
CSharpLexer cSharpLexer = new CSharpLexer(charStream);
CommonTokenStream commonTokenStream = new CommonTokenStream(cSharpLexer);
CSharpParser cSharpParser = new CSharpParser(commonTokenStream);
  • 有谁知道如何将 InputStream 的编码更改为正确的编码？
  • 当我将编码更改为 ANSI 时，Notepad++ 会做什么？
4

2 回答 2

1

读取文本文件时，您应该明确设置编码。尝试以下更改的示例

CharStream charStream = new ANTLRInputStream(inputStream, "UTF-8");

于 2012-05-03T14:19:37.330 回答
-1

我通过将 ImputStream 放入 BufferedStream 解决了这个问题，然后删除了字节顺序标记。

我猜我的解析器不喜欢这种编码，因为我也尝试过明确设置编码。

于 2012-05-09T01:26:00.607 回答