まれな空白がなくてもJavaフィルタワードがファイル外に出る

Question

私は学校のための大きなデータ割り当てに取り組んでおり、自分のコードを動作させるために、テキストファイルから単語をフィルタリングする必要があります。

私はファイルを読み、replaceAll（ "[^ a-zA-Z0-9]"、 ""）;

しかし、これは問題を引き起こします。私は、スペースでフィルタリングし、いくつかの特別な例は次のようにありますので：

wobbewy!'--'Wobbewy,' 

私が手のような言葉：

wobbewywobbewy 

のようなスペース上の単語をフィルタリングしてもすることなく、これらの特別な場合を除外するためにとにかくありif文の膨大な量ですか？ （複数のスペース）私の

Answer 1

スプリットので、「非単語」文字で分割、入力を消費：私は1つの単語として扱われ「ない」のような言葉を聞かせてなる、維持するために文字にアポストロフィを追加

String[] woord = thisLine.trim().split("[^a-zA-Z0-9']+"); 

お知らせ。

Answer 2

特殊文字を削除し、あなたの情報

XXV：私が好きoutpuit取得後

while ((thisLine = bufferedReader.readLine()) != null) { 
     String[] woord = thisLine.toString().trim().split("\\s+"); 
     for(int i=0; i<woord.length; i++){ 
      normalWord = woord[i].replaceAll("[^a-zA-Z]+", " "); 
      normalWord = normalWord.toLowerCase(); 

：私は修正を試みた後に何が起こっているかの

サンプルコード単語の境界については失われます。

変更replaceAll("[^a-zA-Z0-9]", "");〜replaceAll("([^a-zA-Z0-9]|\s)+", " ");（特殊文字と空白を1つのスペースに置き換えます）。