AnTLR4: SPIEGELSTRICH und Dedent Token

Question

Ich bin der Umsetzung Python Grammatik in AnTLR4 aber ich bin vor dem gleichen Problem mit SPIEGELSTRICH und Dedent diskutiert hier: ANTLR4- dynamically inject token

Die Lösung, die ich versucht bin, ist die Lösung von Ter zu konvertieren, das sein kann hier gefunden http://antlr3.org/grammar/1078018002577/python.tar.gz (override nextToken und imaginäre Token einfügen).

Das Problem ist, dass diese Lösung geht davon aus, dass wir eine Lexer Regel haben wie:

LEADING_WS 
    : {getColumn()==1}? 
     // match spaces or tabs, tracking indentation count 
     ( ' ' { spaces++; } 
     | '\t' { spaces += 8; spaces -= (spaces % 8); } 
     | '\014' // formfeed is ok 
     )+ 
     { 
     } 
     ... 

aber ich halte einen Fehler bekommen, weil Aktionen in Lexer Regel letztes Element auf einzelne altermost Alternative sein muss.

kann mir jemand helfen, eine lösung zu finden?

Vielen Dank !!!

Answer 1

Sie müssen Ihre Berechnung mit spaces entweder an das Ende der LEADING_WS Regel oder Ihre Implementierung von nextToken verschieben. Am Ende von LEADING_WS könnte es wie folgt aussehen.

LEADING_WS 
    : {getColumn()==1}? 
    // match spaces or tabs, tracking indentation count 
    [ \t]+ 
    {spaces = computeSpaces(_input.getText());} 
    ;