ANTLR4：忽略输入中的空格，但不忽略字符串文字中的空格

Question

我的语法如下：

grammar SampleConfig;

line: ID (WS)* '=' (WS)* string;

ID: [a-zA-Z]+;
string: '"' (ESC|.)*? '"' ;
ESC : '\\"' | '\\\\' ; // 2-char sequences \" and \\
WS: [ \t]+ -> skip;

输入中的空格被完全忽略，包括字符串文字中的空格。

final String input = "key = \"value with spaces in between\"";
final SampleConfigLexer l = new SampleConfigLexer(new ANTLRInputStream(input));
final SampleConfigParser p = new SampleConfigParser(new CommonTokenStream(l));
final LineContext context = p.line();
System.out.println(context.getChildCount() + ": " + context.getText());

这将打印以下输出：

3: key="valuewithspacesinbetween"

但是，我希望保留字符串文字中的空格，即

3: key="value with spaces in between"

是否可以更正语法来实现此行为，还是应该覆盖CommonTokenStream以在解析过程中忽略空格？

Answer 1

你不应该期望解析器规则中有任何空格，因为你在词法分析器中跳过它们。

删除skip命令或使string成为词法规则：

STRING : '"' ( '\\' [\\"] | ~[\\"\r\n] )* '"';