Unterstützt ANTLR4 die Zuordnung eines Literals zu einem Token?

Question

Angenommen, Sie Grammatik mit Groß- und Kleinschreibung foo Token wie folgt definiert haben:

FOO : F O O ; 

fragment F:('f'|'F'); 
fragment O:('o'|'O'); 

Für dieses Token Vocabulary.getLiteralName(token) kehrt null, da es durch Anpassen eines Musters und nicht eine wörtliche Wert definiert wurde.

Hat Antlr4 eine eingebaute Möglichkeit, einen Literalwert für das Token foo in der Grammer-Definition anzugeben?

Answer 1

Es gibt eine Methode toString() in fast jedem ANTLR4 Laufzeitklasse. Für hierarchische Elemente wie (Parse-) Bäume und Erkennungskontexte werden die untergeordneten Einträge in der Ausgabe von toString() aufgelistet, aber normalerweise mit irgendeiner Form der Formatierung (wie Komma-getrennte Listen).

Also, die Antwort ist: nein. Es gibt keine integrierte Möglichkeit, den Text eines Teilbaums als einzelne unformatierte Zeichenfolge abzurufen. Das Schreiben einer Verkettungsfunktion ist jedoch trivial. Erstellen Sie einfach eine Funktion getText (RuleContext-Kontext), die eine Zeichenfolge zurückgibt und die untergeordneten Elemente des Kontexts iteriert und getText() aufruft (oder das Vokabular verwendet) und gibt dann eine verkettete Zeichenfolge aus den Werten zurück.

Answer 2

getSymbolicName(int) sollte zurückkehren FOO für die Eingabe "foo":

TLexer lexer = new TLexer(new ANTLRInputStream("foo")); 

for (Token token : lexer.getAllTokens()) { 
    System.out.println(TLexer.VOCABULARY.getSymbolicName(token.getType())); 
}