文字列を分割するためのStrTokenizerの動作が一貫していません

Question

文字列を区切り文字で分割しようとしていますが、区切り文字を引用符で囲み無視することができます。例えば。

"foo; bar; 'foo; bar'"

は、区切り与えられた3つの文字列にスリットれるべき ';'そして、引用文字「：

foo bar foo; bar

私は以下のようにStrTokenizerを使用していますが、"foo; bar; 'foo; bar'"のために働くようではありませんが、それは"'foo; bar'; foo; bar;"

のために働くん誰が間違っているかを説明することはできますか？

import org.apache.commons.lang3.text.StrTokenizer; 
public class Main { 
    public static void main(String[] args) { 

     String x= "foo; bar; 'foo; bar'"; 

     StrTokenizer tokens= new StrTokenizer(x, ';', '\''); 

     for (String token : tokens.getTokenArray()) { 
      System.out.println(token.trim()); 
     } 
     // Prints: 
     // foo 
     // bar 
     // 'foo 
     // bar' 

     /* --------- */ 
     // THIS IS OK: 
     x= "'foo; bar'; foo; bar"; 

     tokens= new StrTokenizer(x, ';', '\''); 

     for (String token : tokens.getTokenArray()) { 
      System.out.println(token.trim()); 
     } 
     // Prints: 
     // foo; bar 
     // foo 
     // bar 
    } 
} 

Answer 1

デフォルト引用されたエリアで区切り以外の任意の文字（でもスペース）（そう; 'quote'がOKではありませんが、;'qupte'で結構です）を付けることができないように見えます - （端部との間のスペースので、少し奇妙です引用符と区切り文字の間に何らかの問題が発生していないようで、バグかもしれません。明示的にトリミングする必要がある文字を設定

は（も、あなたは、もはやあなたの印刷文でtrim()を追加する必要があります）この問題を解決するようだ：

StrTokenizer tokens = new StrTokenizer(x, ';', '\''); 
tokens.setTrimmerMatcher(StrMatcher.spaceMatcher());// <- add this line 

にトリムするには：スペース、タブ、改行や改ページの使用StrMatcher.splitMatcher()