.gzファイルの一部（先頭ではない）を抽出する方法は？

Question

大きなgzファイル（11 GB）を用意しています.100 GBの空き容量のあるコンピュータには解凍できません。私はコマンドで最初の50 GBを抽出しました：

gzip -cd file.gz | dd ibs=1024 count=50000000 > first_50_GB_file.txt 

ファイルのこの部分からデータを正常に解析できました。今私は、解析するファイルの他の部分を抽出したいと思います。私は、ファイルから最後のn行を抽出し、その後、次のようにすることを解凍しようとしました：

tail -50 file.gz > last_part_of_file.gz 

私はその後、私が使用できることを期待：

gzip -cd last_part_of_file.gz | dd ibs=1024 count=50000000 > last_50_GB_file.txt 

が、tailコマンドを取っていますたった50行のテストでは> 10分。

誰かが.gzファイルの（潜在的に恣意的な）部分をどのように抽出するのかについての初めが含まれていない場合、私は非常に感謝します。

Answer 1

tailはバイナリファイルでは機能しません。 tail -50は最後の50行を返します。 '\ n'（char 10）区切り文字を探します。

gzip -cd file.gz | dd ibs=1024 count=50000000 > first_50_GB_file.txt 

gzip -cd file.gz | dd ibs=1024 skip=50000000 > after_50_GB_file.txt 

最初に抽出されたファイルサイズは100GBでしたが、 次の50ギガバイト

gzip -cd file.gz | dd ibs=1024 skip=100000000 count=50000000 > next_100-150_GB_file.txt 

ための50ギガバイト

gzip -cd file.gz | dd ibs=1024 skip=50000000 count=50000000 > next_50-100_GB_file.txt 

にスペースを制限するのではなく、それぞれの時間のgzipプロセスが原因圧縮アルゴリズムにアーカイブファイル の先頭から膨らませる必要があります。