2

语法：

grammar test;

WS  :   ( ' '
        | '\t'
        | '\r'
        | '\n'
        ) {$channel=HIDDEN;}
    ;

STRING
    :  '"' ( ESC_SEQ | ~('\\'|'"') )* '"'
    ;

fragment
HEX_DIGIT : ('0'..'9'|'a'..'f'|'A'..'F') ;

fragment
ESC_SEQ
    :   '\\' ('b'|'t'|'n'|'f'|'r'|'\"'|'\''|'\\')
    |   UNICODE_ESC
    |   OCTAL_ESC
    ;

fragment
OCTAL_ESC
    :   '\\' ('0'..'3') ('0'..'7') ('0'..'7')
    |   '\\' ('0'..'7') ('0'..'7')
    |   '\\' ('0'..'7')
    ;

fragment
UNICODE_ESC
    :   '\\' 'u' HEX_DIGIT HEX_DIGIT HEX_DIGIT HEX_DIGIT
    ;

start 
    :   STRING EOF;

它是用向导生成的语法；我添加了规则“开始”。

在解释器中输入：

"abc"

结果在控制台：

[19:09:54] Interpreting...
[19:09:54] problem matching token at 1:2 MismatchedTokenException(97!=34)
[19:09:54] problem matching token at 1:3 NoViableAltException('b'@[1:1: Tokens : ( WS | STRING );])
[19:09:54] problem matching token at 1:4 NoViableAltException('c'@[1:1: Tokens : ( WS | STRING );])
[19:09:54] problem matching token at 1:5 NoViableAltException(''@[()* loopback of 11:12: ( ESC_SEQ | ~ ( '\\' | '"' ) )*])

截图： http ://habreffect.ru/files/200/4cac2487f/antlr.png

ANTLRWorks v1.4 也在 ANTLR v3.2 的控制台上尝试过，结果相同。

如果我输入“\nabc”而不是“abc”，它工作正常。如果我在 STRING 规则中将 ESC_SEQ 放在右侧，则 "abc" 有效，但 "\nabc" 失败。

4

1 回答 1

2

这似乎是 ANTLRWorks 1.4 中的一个错误。您可以尝试使用 ATLRWorks 1.3（或更早版本），也许该版本可以正常工作（我只对 v1.4 进行了快速检查！）。

从控制台，您的示例字符串 ("abc"和"\nabc") 都被解析，没有任何问题。这是我的测试台和相应的输出：

grammar test;

start 
  :  STRING {System.out.println("parsed :: "+$STRING.text);} EOF
  ;

WS  
  :  (' ' | '\t' | '\r' | '\n') {$channel=HIDDEN;}
  ;

STRING
  :  '"' ( ESC_SEQ | ~('\\'|'"') )* '"'
  ;

fragment
HEX_DIGIT 
  :  ('0'..'9'|'a'..'f'|'A'..'F') 
  ;

fragment
ESC_SEQ
  :  '\\' ('b'|'t'|'n'|'f'|'r'|'\"'|'\''|'\\')
  |  UNICODE_ESC
  |  OCTAL_ESC
  ;

fragment
OCTAL_ESC
  :  '\\' ('0'..'3') ('0'..'7') ('0'..'7')
  |  '\\' ('0'..'7') ('0'..'7')
  |  '\\' ('0'..'7')
  ;

fragment
UNICODE_ESC
  :  '\\' 'u' HEX_DIGIT HEX_DIGIT HEX_DIGIT HEX_DIGIT
  ;

请注意，语法与您的语法相同，只是格式略有不同。

和“主要”类：

import org.antlr.runtime.*;

public class Demo {
    public static void main(String[] args) throws Exception {
        ANTLRStringStream in = new ANTLRStringStream(args[0]);
        testLexer lexer = new testLexer(in);
        CommonTokenStream tokens = new CommonTokenStream(lexer);
        testParser parser = new testParser(tokens);
        parser.start();
    }
}

现在从控制台创建解析器和词法分析器：

java -cp antlr-3.2.jar org.antlr.Tool test.g

编译所有 .java 源文件：

javac -cp antlr-3.2.jar *.java

并运行“主”类：

java -cp .:antlr-3.2.jar Demo \"\\nabc\"
// output:                                   parsed :: "\nabc"

java -cp .:antlr-3.2.jar Demo \"abc\"
// output:                                   parsed :: "abc"

（对于 Windows，将上述命令中的 a 替换为:a ;）

请注意，上面的命令行参数是在 Bash 上运行的示例，其中"和\需要转义：这在您的系统上可能会有所不同。但正如您从输出中看到的那样：两者都"\nabc"得到"abc"正确解析。

ANTLRWorks 是一个编辑语法文件的好工具，但是（根据我的经验）它有很多这样有趣的错误。这就是为什么我只用它编辑语法并在控制台上生成、编译和测试文件，就像我向你展示的那样。

高温高压

于 2010-06-14T18:03:01.643 回答