のpython：圧縮されたテキストファイル

Question

から行を読み込む

、それは完全にファイルを解凍せずにパイソンを使用したGZ-圧縮されたテキストファイルから行を読みやすいですか？私は200mbのaroudのtext.gzファイルを持っています。私はそれを抽出すると、7.4ギガバイトになります。これは私が読まなければならない唯一のファイルではありません。プロセス全体については、10個のファイルを読み込む必要があります。これは逐次的な仕事になりますが、私は情報全体を超越することなくそれを行うことは賢明なことだと思います。私はそれが可能であることを知らない。どのようにそれはPythonを使用して行うことができますか？テキストファイルを1行ずつ読む必要があります。

Answer 1

あなたがgzip.GzipFileを使用してみましたか？引数はopenに似ています。

Answer 2

あなたはpythonで標準のgzipモジュールを使用することができます。

gzip.open('myfile.gz') 

このファイルを他のファイルとして開き、その行を読み込むだけです。

ここに詳細情報：gzip.GzipFileを使用してPython gzip module

Answer 3

：

import gzip 

with gzip.open('input.gz','r') as f: 
    for line in f: 
     print('got line', line) 

注：のpython3のためにあなたがバイナリ読書に'r'デフォルトとして、'rt'にオープンするファイルを指定する必要があり、またはそれ以外の場合はline.decode(...)を使用します。

注：gzip.open(filename, mode)は、gzip.GzipFile(filename, mode)の別名です。 私は前者を好みます。これは、非圧縮ファイルを開くために使用されるwith open(...) as f:に似ています。