巨大なメモリ割り当てを追跡するためのグローバル演算子のオーバーライド？

Question

私は大きなモノリシックアプリケーションの特別なビルドを制作しようとしています。私が解決しようとしている問題は、難しい再現性のある膨大なメモリ割り当てを追跡することです（OSレポートで判断して30〜80ギガバイト）。 私は、問題は標準::ベクトルが負の32ビット整数値にリサイズされていると考えています。この動作を示す唯一のプラットフォームはSolarisです（おそらく、このような連続したメモリのまとまりをうまく割り当てることができる唯一のプラットフォームです）。 std :: vectorをmy classにグローバルに置き換えて、すべての呼び出しを実際のベクトルに委譲し、疑わしい割り当てがあるのを見てください(size > 0x7FFFFFFFu)？場合によっては、size_tとresize()メソッドを使用するコンストラクタを選択的に置き換えることができますか？多分、グローバルオペレーターを新しいものに乗っ取ることさえ可能でしょうか？

Answer 1

なぜこのようなことをしないのですか？すぐに問題を見つけるだろうifにブレークポイントを設定する

void *operator new(size_t size) 
{ 
    // if (size > MAX_SIZE) ... 
    return malloc(size); 
} 

void *operator new [](size_t size) 
{ 
    // if (size > MAX_SIZE) ... 
    return malloc(size); 
} 

。

Answer 2

構築時にベクターにカスタムアロケータを提供することができます。

最初に、std::allocatorに委任し、要求されたメモリサイズをファイアウォールすることができます。

Answer 3

問題のプラットフォームでstd::vectorクラスの実装を見てください。各インプリメンテーションは、メモリ管理を別々に扱います（たとえば、ベクトルの現在の割り当てサイズ外にオブジェクトを追加すると、現在割り当てられているスペースの2倍）。オブジェクトが十分に大きい場合や、ベクトルに多数のエントリが追加されている場合は、コンピュータ上の利用可能な（連続した）メモリを超えて割り当てることができます。そのような場合は、そのベクトルのカスタムアロケータを調べる必要があります。

大きなアイテムをベクトルに格納する場合は、別のコレクション（たとえばstd::list）を探したり、実際のオブジェクトの代わりにポインタを格納したりすることをおすすめします。

Answer 4

割り当てを追跡するためにに独自のallocatorタイプを指定することができます。 しかし、私はそれが理由だとは思わない。最初に、サイズ（30〜80GB）を見ると、64ビットコードだと結論づけられます。どのようにして32ビットの負の整数値で64ビットのベクタサイズにすることができましたか？まず64ビットに昇格して値を保持しますか？第2に、この問題がSolarisでのみ発生した場合は、別の問題を示す可能性があります。私が知る限り、Solarisは割り当て時にメモリをコミットする唯一のOSであり、他のオペレーティングシステムはそれらのメモリページが実際に使用されるまで割り当てられたアドレススペースをマークするだけです。だから私は未使用の割り当てを探します。