如何在ANTLR中管理可选空格?

pet*_*ust 8 java whitespace antlr

我试图解析ANTLR中的数据文件 - 它具有可选的空格

 3 6
  97   12
 15 18
Run Code Online (Sandbox Code Playgroud)

以下显示了行的开始和结束位置.最后有一个换行符,没有标签.

^ 3 6$
^  97   12$
^ 15 18$
^
Run Code Online (Sandbox Code Playgroud)

我的语法是:

lines   :   line+;
line    :   ws1 {System.out.println("WSOPT :"+$ws1.text+":");} 
                num1 {System.out.println("NUM1 "+$num1.text);} 
                ws2 {System.out.println("WS :"+$ws2.text+":");}
                num2 {System.out.println("NUM2 "+$num2.text);} 
                NEWLINE
    ;
num1    :    INT    ;
num2    :    INT    ;
ws1 :   WSOPT;
ws2 :   WS;

INT     : '0'..'9'+;
NEWLINE :    '\r'? '\n';
//WS    :   (' '|'\t' )+ ;
WS  :   (' ')+ ;
WSOPT   :   (' ')* ;
Run Code Online (Sandbox Code Playgroud)

这使

line 1:0 mismatched input ' ' expecting WSOPT
WSOPT :null:
NUM1 3
WS : :
NUM2 6
line 2:0 mismatched input '   ' expecting WSOPT
WSOPT :null:
NUM1 97
WS :   :
NUM2 12
BUILD SUCCESSFUL (total time: 1 second)
Run Code Online (Sandbox Code Playgroud)

(即领先的WS尚未被识别,最后一行已被遗漏).

我想解析没有空格的行,例如:

^12    34$
^ 23 97$
Run Code Online (Sandbox Code Playgroud)

但我得到的错误如下:

line 1:0 required (...)+ loop did not match anything at input ' '
Run Code Online (Sandbox Code Playgroud)

我很欣赏在ANTLR中解析WS的一般解释.

编辑 @jitter有一个有用的答案 - {ignore=WS}没有出现在我正在使用的"权威ANTLR参考"书中,因此它显然是一个棘手的领域.

还需要帮助 我已将其修改为:

lines   :   line line line;
line
options { ignore=WS; }
        :
                ws1  {System.out.println("WSOPT :"+$ws1.text+":");} 
                num1 {System.out.println("NUM1 "+$num1.text);} 
                ws2  {System.out.println("WS :"+$ws2.text+":");}
                num2 {System.out.println("NUM2 "+$num2.text);} 
                NEWLINE
    ;
Run Code Online (Sandbox Code Playgroud)

但得到错误:

illegal option ignore
Run Code Online (Sandbox Code Playgroud)

EDIT显然已经从V3中删除了:http: //www.antlr.org/pipermail/antlr-interest/2007-February/019423.html

Sam*_*ell 10

WS : (' ' | '\t')+
     {$channel = HIDDEN;}
   ;
Run Code Online (Sandbox Code Playgroud)

  • Antlr4版本:WS:(''|'\ t')+ - > channel(HIDDEN); (5认同)

pet*_*ust 1

我已经设法使用词法分析器结构来实现此功能,例如:

WS  :   (' ')+ {skip();};

WSOPT   :       (' ')* {skip();};
Run Code Online (Sandbox Code Playgroud)

但不在换行符中。然后在解析器中构造如下:

num1 num2 NEWLINE;
Run Code Online (Sandbox Code Playgroud)

关键是删除词法分析器中除 NEWLINE 之外的所有 WS。