antlrの文法ファイルからトークンファイルを作成する方法

Question

antlrを使用してDSLを作成しています。 LexerとParserは1つの文法ファイル（例えばlayout.g）で書かれています。ツリー文法は別の文法ファイル（例えばlayoutTree.g）に書かれています。今、ツリーパーサが正しく解析されていません。パーサからのAST出力とその正しい出力を表示しました。私は生成されたツリーパーサコードを歩き、トークン値宣言がツリーパーサとパーサの異なる値を割り当てることがわかりました。パーサとツリーパーサからのサンプル出力です。

パーサ出力

public static final int ARRAY_MEMBER_TOKEN=4; 
public static final int ARRAY_TOKEN=5; 
public static final int DECLARATION_TOKEN=6; 

ツリーパーサの出力

public static final int EOF=-1; 
public static final int DECLARATION_TOKEN=4; 
public static final int IDENTIFIER=5; 

あなたはDECLARATION_TOKENは、パーサ出力と木のパーサの出力に異なる値を持って見ることができるように。このツリーパーサのため、期待どおりに動作していません。どのようにこの問題を修正できますか？

生成されたトークンファイル（layout.tokenなど）に問題はありますか？このファイルはプロジェクトで空です。このファイルはどのように生成できますか？

Answer 1

あなたのツリーの文法には、このようなことがありますか？

options 
{ 
    tokenVocab=layout; //NOT layout.g or layout.tokens 
    ASTLabelType=pANTLR3_BASE_TREE; 
}