WhitespaceAnalyzerでストップワードを使用する

Question

LuceneのStandardAnalyzerは、索引付けするときに文字列/頭字語からドットを削除します。 Luceneにドットを保持させたいので、WhitespaceAnalyzerクラスを使用しています。

私はStandardAnalyzerに私のストップワードのリストを与えることができます...しかし、どのようにWhitespaceAnalyzerにそれを与えるのですか？

読んでいただきありがとうございます。

Answer 1

WhiteSpaceAnalyzerを拡張して独自のアナライザーを作成し、tokenStreamメソッドを次のようにオーバーライドします。

public TokenStream tokenStream(String fieldName, Reader reader) { 
    TokenStream result = super.tokenStream(fieldName, reader); 
    result = new StopFilter(result, stopSet); 
    return result; 
} 

ここstopSetはあなたがストップワードのリストを受け入れ、あなたのアナライザにコンストラクタを追加することによって得ることができるストップワードの設定、です。

TokenStreamを再利用する予定の場合、同様の方法でreusableTokenStream（）メソッドをオーバーライドすることもできます。