ANTLR V4 + Java8 Грамматика -> OutOfMemoryException

Question

Я пытаюсь использовать ANTLR V4 с публично данной Java 8 грамматики - https://github.com/antlr/grammars-v4/blob/master/java8/Java8.g4

Я создал файлы классов и попытался разобрать Java 8 JRE, но почему-то на java.text.SimpleDateFormat.java он падает с :

java.lang.OutOfMemoryError: GC overhead limit exceeded 

Он также аварии, когда я пытаюсь разобрать, что один файл в одиночку.

Можно ли это как-то решить? Очевидно, ANTLR V4 не может обрабатывать файлы с более чем 2000 LOC? Это правильное предположение?

Что я сделал до сих пор:

• Изменение назначенных памятей JVM в нескольких шагах от 256 до 4 Гб - это то изменение в

  java.lang.OutOfMemoryError: Java пустое место

• Для обеспечения отсутствия синтаксической проблемы с входным файлом
  Сначала я снял первую половину файла ->разбора кажется, хорошо,
  затем расстегнул, что действие и удалили вторую половину файла ->разбора кажется, хорошо

Answer 1

Похоже грамматика в том репозитории основана на том, что я написал. Грамматика основана на определенных функциях, которые доступны только в моем "optimized" fork of ANTLR 4, чтобы хорошо работать. В дополнение к использованию этого релиза, вам необходимо сделать следующие две вещи, чтобы максимально увеличить производительность:

1. Используйте стратегию синтаксического анализа два этапа. Если предположить, что правило запуска называется compilationUnit, это может выглядеть следующим образом:

   CompilationUnitContext compilationUnit; 
   try { 
       // Stage 1: High-speed parsing for correct documents 
   
       parser.setErrorHandler(new BailErrorStrategy()); 
       parser.getInterpreter().setPredictionMode(PredictionMode.SLL); 
       parser.getInterpreter().tail_call_preserves_sll = false; 
       compilationUnit = parser.compilationUnit(); 
   } catch (ParseCancellationException e) { 
       // Stage 2: High-accuracy fallback parsing for complex and/or erroneous documents 
   
       // TODO: reset your input stream 
       parser.setErrorHandler(new DefaultErrorStrategy()); 
       parser.getInterpreter().setPredictionMode(PredictionMode.LL); 
       parser.getInterpreter().tail_call_preserves_sll = false; 
       parser.getInterpreter().enable_global_context_dfa = true; 
       compilationUnit = parser.compilationUnit(); 
   } 
   

2. Включить глобальный контекст DFA (я включил это в предыдущем блоке кода, так что вы не можете пропустить это)

   parser.getInterpreter().enable_global_context_dfa = true;