メモリ内のPythonオブジェクトを圧縮する

Question

Pythonでファイルを圧縮するほとんどのチュートリアルでは、圧縮されたPythonオブジェクトを介在させずにそのファイルをディスクに書き込んでいます。私は、ディスクに書き込んだり、ディスクから読み込んだりすることなく、メモリ内のPythonオブジェクトをピケッとし、圧縮する方法を知りたい。

Answer 1

私は1つの場所でメモリを節約するためにこれを使用します。

import cPickle 
import zlib 

# Compress: 
compressed = zlib.compress(cPickle.dumps(obj)) 

# Get it back: 
obj = cPickle.loads(zlib.decompress(compressed)) 

objは、小さなオブジェクトの数への参照を持っている場合、これは多くが使用するメモリの量を減らすことができます。 Pythonの小さなオブジェクトの多くは、オブジェクトごとのメモリオーバーヘッドとメモリの断片化のために追加されます。

Answer 2

bz2.compress(pickle.dumps(some_object)) 

Answer 3

バッテリが同梱されています。

>>> zlib.compress(pickle.dumps([42])) 
'x\x9c\xd3\xc8)0\xe0\xf241\xe2J\xd4\x03\x00\x10A\x02\x87'