大きなピックルダンプでコンピュータがハングアップ

Question

大規模なpickleファイルを保存するとコンピュータがハングすることがあります。どのようにこれを修正するか、または何か他のピクルスに置き換えますか？

UPDATE

ハングコンピュータは、文字通り、それは "メモリの限界に近づい" ではありません。また、これは100％のケースで起こるわけではないので、原則として大きなアレイをピックリングすることは可能です。

UPDATE 2

私の恥：ピクルスが有罪ではなかったです。それはnumpy.stackで、40000の画像のリストに対して呼び出されました。

UPDATE 3

いいえ、漬物もnumpy.stack問題が修正された後でも、ハングアップします。

Answer 1

このシリアライズされたデータの内容を教えてください。ピックルマニュアルから

スニペット：

ピクルスモジュールが誤っまたは悪意を持って構築されたデータに対して安全ではありません。信頼されていない、または認証されていないソースから受信したデータは、絶対にunpickleしないでください。

したがって、ピクルスを使用すると、追加のコード、つまり無限ループが実行される可能性があります。