Javaプログラムのパフォーマンスを向上させる

Question

アプレット検索ユーティリティを作成しました。このユーティリティでは、入力として文字列を指定し、その文字列を指定したファイルまたはフォルダで検索します。
私はこれでやったが、私はその性能に満足していない。
処理に時間がかかり過ぎています。
何が起きているかを見るためにプロファイリングをすることにしました。scanner.hasNextLine（）メソッドがほとんどの時間を費やしていることに気付きました。
私はすべての行を読み込み、その文字列を検索する必要があるため、これは私のプログラムのために非常に重要な方法ですが、私はその性能を向上させ、実行時間ここ

を削減することが可能な他の方法は、コードがあるです私はこのメソッドを使用しています。

そして、はいtoLowerCase（）メソッドは、さらに時間がかかると予想しています。

---

私は自分のコードを変更したとアレックスとNRJが提案し、私は自分のアプリケーションのパフォーマンスでの素敵な改善を見つけとして今私はScannerの代わりにBufferedReaderを使用しています。
これは、以前のバージョンの1/3に処理されています。
お返事いただきありがとうございました.....

Answer 1

：私はこのようなものを使用してJavaからのgrepを呼び出します。大規模なデータを処理するのに最適化されていません。あなたがしようとするために、これが十分でない場合

r.readLine()

：

BufferedReader r = new BufferedReader(new InputStreamReader(new FileInputStream(fileName)))

はその後、ライン・バイ・ラインを読む：私は FileInputStreamラップ InputStreamReaderラップシンプル BufferedReader使用することをお勧めいたしますたいです大量の行を読み込んで処理します。

toLowerCase()については、代わりに正規表現を使用できます。利点は、たびに行の大文字と小文字を変更する必要がないことです。欠点は単純なケースでは、正規表現が通常の文字列比較より少し遅いことです。

Answer 2

文字列の一致をファイルシステムで検索するのにJavaを使用しません。代わりにJavaからネイティブアルゴリズムを呼び出す。私はScannerのコードを調べて、私はあなたが正しいと思い、あなたの質問に続いて

ProcessBuilder pb = new ProcessBuilder("grep", "-r", "foo"); 
pb.directory(new File("myDir")); 
Process p = pb.start(); 
InputStream in = p.getInputStream(); 
//Do whatever you prefer with the stream 

Answer 3

あなたのソリューションを再設計し、Luceneのようなものを使用して検索を行うことをお勧めします。 http://www.avajava.com/tutorials/lessons/how-do-i-use-lucene-to-index-and-search-text-files.html

Answer 4

1. スレッドを使用してくださいBufferedReader

2. を使用してみてください：あなたは、はるかに効率的にテキストファイルがここに見つけることができると、それを行う方法についてのチュートリアルをLuceneの持つファイルをインデックスして検索することができます。並行してファイルを検索すると、検索時間を短縮できます。

Answer 5

（上記のコメントに応答するだけの小さな最適化、。）

  if(!caseSensitive) 
      { 
       searchString = searchString.toLowerCase(); 
      } 
      while (true) { 
       String line = bufferedReader.readLine(); 
       if (line == null) 
        break; 
       if(!caseSensitive) 
       { 
        line = line.toLowerCase(); 
       } 
       if(!exactMatch) 
       { 
        if (line.contains(searchString)) { 
         // System.out.println(line); 
         cnt += StringUtils.countMatches(line, 
           searchString); 
        } 
       }