Antlr MissingTokenException（単純文法）

Question

dir1/dir2/filenameという形式のファイルシステムパスを解析する、世界で最もシンプルな文法と思われるものがあります。私は問題を呈している小さなサンプルを得るためにいくつかの細部を切り捨てました。

compilationUnit : relativePath; 
identifier: IdentifierStart IdentifierPart*;  
relativePath : identifier (SLASH identifier)*; 

SLASH : '/'; 
fragment IdentifierPart : 'a'..'z' | 'A'..'Z' | '_' | '0'..'9'; 
fragment IdentifierStart : 'a'..'z' | 'A'..'Z' | '_';  

私はそれをFOO/AA/BBのようなものを養うならば、私はMissingTokenExceptionを取得します。それは識別子を特定し、次にSLASHを取得し、識別子にハングするMissingTokenExceptionを取得します。何か根本的なものでなければなりませんが、何がありますか？

Answer 1

キーワードfragmentをレクサールールの前に置くと、このルールはパーサールールで使用できません。 fragmentは、他のレクサールール内でのみ使用できます。そのようなルールは、決して独自のトークンにならず、他のトークン（他のレクサールール）の一部としてのみ使用できます。言い換えれば

：あなたはfragmentキーワードを残す必要がありますがすることができ、その場合には

// parser rules 
compilationUnit : relativePath; 
relativePath : identifier (SLASH identifier)*; 
identifier  : IdentifierStart (IdentifierStart | Digit)*;  

// lexer rules 
SLASH   : '/'; 
IdentifierStart : 'a'..'z' | 'A'..'Z' | '_'; 
Digit   : '0'..'9'; 

しかし、相対パスでも単一のトークンにすることができ、：あなたの文法からこれらのfragmentキーワードを削除

// parser rule 
compilationUnit : RelativePath; 

// lexer rules 
RelativePath : Identifier ('/' Identifier)*; 

fragment Identifier  : IdentifierStart IdentifierPart*; 
fragment IdentifierPart : 'a'..'z' | 'A'..'Z' | '_' | '0'..'9'; 
fragment IdentifierStart : 'a'..'z' | 'A'..'Z' | '_';  

をしかし、その後RelativePathのmatch以来、パーサの作成Identifierトークンがあることはありません。このように、レクサールールにいくつかの構文規則を作ります単一のIdentifierです。そのため、Identifierもfragmentである必要があります。だから、おそらくそれはあなたが望むものではありません。