大きなテキストファイルをチャンクで読む処理

Question

私は地理情報（聞いたことがある人のためのGeonameプロジェクト）で構成された非常に大きなテキストファイル（約850万行、1 GB）を持っています。現在私はBufferedReaderを使用しており、私のプログラムでは10000行を快適に読み込み、必要なデータを表示することができます。しかし、私はファイル全体の各行を読み込んで検索しなければならず、50000行以上をテストすると、プログラムは非常に遅くなり、基本的に役に立たなくなります。ファイルを分割して塊で読み込んで実行時間を短縮するためのオプションは何ですか？

Answer 1

java.nio.Bufferクラスとそのサブクラスについて読んでください。とりわけ、直腸および非直腸の緩衝液およびその使用の賛否両論に注意を払う。ダイレクトバッファは、ディスクへの直接アクセスと非常に大きなファイルをチャンクで処理する能力を提供します。しかし、この素晴らしい能力には、いくらかの価格とメモリリークのリスクが伴います。しかし、私はそれがあなたが必要とするかもしれないものだと思います。ここをクリックしてください：https://docs.oracle.com/javase/8/docs/api/java/nio/Buffer.html