HAWQメモリの設定方法は？

Question

すべてのHAWQセグメントインスタンスで使用できるメモリ量と、各セグメントで使用可能なメモリ量を設定できますか？

Answer 1

これはsystem requirementsでカバーされています。

Answer 2

Apache Hawqでは、仮想セグメントはエグゼキュータのコンテナとして使用されます。その結果、クエリによって使用されるメモリは、仮想セグメントの数によって制御されます。 GUC hawq_rm_memory_limit_persegを使用すると、各ホスト（セグメントインスタンス）の合計メモリサイズを制御したり、仮想セグメントのメモリサイズを制御したり、各コンテナのmemsize（デフォルトでは256M）を使用して独自のresqueueを作成できます。

Answer 3

仮想セグメントのメモリ使用量は、すべてのフォークされたQEの合計メモリを計算するhawq_rm_stmt_vseg_memoryによって設定されます。異なるクエリステートメントが同じvsegに存在する可能性があるため、hawq_rm_stmt_vseg_memoryは異なるクエリ間で共有されます。

Answer 4

hawq_rm_stmt_vseg_memoryは、1つの仮想セグメントのメモリクォータ（サイズ）です。デフォルト値は128MBです。つまり、1つの仮想セグメントのメモリサイズは128MBであり、1つのクエリは多数の仮想セグメントを要求することがあります。

Answer 5

@Wen Lin、「1つのクエリで多数の仮想セグメントが要求される可能性がある」と述べたので、1つの仮想セグメントも多くのクエリで共有されます。すべての共有クエリはメモリクォータを共有します。これはデフォルトで128mbですか？

Answer 6

@ztaoでは、仮想セグメントはクエリによって共有されません。 1つのクエリでは、RMから仮想セグメントを尋ねて、終了すると仮想セグメントをRMに返します。