如何定义在ANTLR4中可以出现在多种词法模式中的标记?

时间:2013-04-04 09:25:42

标签: lexer antlr4

我正在学习ANTLR4并尝试使用词汇模式。如何在多个词法模式中出现相同的标记?作为一个非常简单的例子,假设我的语法有两种模式,我想在这两种模式中匹配空格和行尾,我怎么能这样做而不以WS_MODE1和WS_MODE2为结尾。有没有办法在两种情况下重用相同的定义?我希望在输出流中获得所有空白区域的WS令牌,而不管模式如何。这同样适用于可以在两种模式下出现的EOL和其他关键字。

1 个答案:

答案 0 :(得分:15)

规则必须具有不同的名称,但您可以使用-> type(...) lexer命令为它们指定相同的类型。

WS : [ \t]+;

mode Mode1;

    Mode1_WS : WS -> type(WS);

mode Mode2;

    Mode2_WS : WS -> type(WS);

即使Mode1_WSMode2_WS不是fragment规则,代码生成器也会看到type命令并知道您重新分配了它们的类型,因此它不会定义他们的代币。