ANTLR4: Пробелы обработка

Question

Я видел много грамматик Antlr, которые используют пробельные обработку, как это:

WS: [ \n\t\r]+ -> skip; 
// or 
WS: [ \n\t\r]+ -> channel(HIDDEN); 

Так пробельные символы отбрасываются соответственно отправить на скрытый канал.

С грамматикой, как это:

grammar Not; 

start:  expression; 
expression: NOT expression 
      | (TRUE | FALSE); 

NOT: 'not'; 
TRUE: 'true'; 
FALSE: 'false'; 
WS: [ \n\t\r]+ -> skip; 

действительные входы «не так» или «не ложно», но и «nottrue», который не является желаемым результатом. Изменение грамматика:

grammar Not; 

start:  expression; 

expression: NOT WS+ expression 
      | (TRUE | FALSE); 

NOT: 'not'; 

TRUE: 'true'; 
FALSE: 'false'; 

WS: [ \n\t\r]; 

исправляет проблему, но я не хочу, чтобы обрабатывать пробельные вручную в каждом правиле.

Обычно я хочу иметь пробел между каждым токеном с некоторыми исключениями (например, «! True» не требуется пробел между ними).

Есть ли простой способ сделать это?

Answer 1

Добавить правило IDENTIFIER lexer для обработки слов, которые не являются ключевыми словами.

IDENTIFIER : [a-zA-Z]+; 

Теперь текст nottrue является единственным IDENTIFIER маркер, который парсер не будет принимать вместо отдельных ключевых слов в not true.

Удостоверяются, что IDENTIFIER определено после ваших других ключевых слов. Лексер найдет, что и NOT, и IDENTIFIER соответствуют тексту not, и назначат тип токена первой, которая появляется в грамматике.