Разбор неоднозначного ввода с Antlr - PullRequest
1 голос
/ 19 июня 2010

Я несколько дней пытался разобрать текст, который состоит из текста и чисел (я назвал это предложением в моей грамматике).

    sentence options {
          greedy=false;
     } 
         : (ANY_WORD | INT)+;

У меня есть правило, которое требует синтаксического анализа предложения, заканчивающегося INT

    sentence_with_int 
        : sentence INT;

Так что, если бы у меня были какие-то данные, это было "количество купленных ботинок размера 14 было3 "тогда предложение будет соответствовать не просто предложению.Я уверен, что есть лучший способ сделать это, но я только изучаю инструмент.

Спасибо, Ричард

1 Ответ

2 голосов
/ 19 июня 2010

Ваша грамматика:


grammar Test;

sentence_with_int 
  :  sentence {System.out.println("Parsed: sentence='"+$sentence.text+"'");}
     INT      {System.out.println("Parsed: int='"+$INT.text+"'");}
  ;

sentence
  : (ANY_WORD | INT)+
  ;

ANY_WORD
  :  ('a'..'z' | 'A'..'Z')+
  ;

INT
  :  ('0'..'9')+
  ;

WS  
  :  (' ' | '\t' | '\r' | '\n') {$channel=HIDDEN;}
  ;

делает именно это.Вот небольшой тестовый комплект:

import org.antlr.runtime.*;

public class Demo {
    public static void main(String[] args) throws Exception {
        ANTLRStringStream in = new ANTLRStringStream("the number of size 14 shoes bought was 3");
        TestLexer lexer = new TestLexer(in);
        CommonTokenStream tokens = new CommonTokenStream(lexer);
        TestParser parser = new TestParser(tokens);
        parser.sentence_with_int();
    }
}

Сначала сгенерируйте парсер и лексер (при условии, что все ваши файлы и файл ANTLR находятся в одном каталоге):

java -cp antlr-3.2.jar org.antlr.Tool Test.g

и откомпилируйтевсе .java исходные файлы:

javac -cp antlr-3.2.jar *.java

и, наконец, запустите класс Demo:

java -cp .:antlr-3.2.jar Demo

( в Windows, замените : на ;)

, который выдает следующий вывод:

Parsed: sentence='the number of size 14 shoes bought was'
Parsed: int='3'
...