1

私はAWS DATA PIPLINEを使用してPSQLからS3にデータを転送しようとしましたが、メモリの問題でアクティビティが失敗しました。 Javaヒープスペースエラーが発生するAWSデータパイプラインバックアップRDS PSQLからS3へ

psqlテーブル(25Gb)からS3にデータを転送できる複数のソリューションとは何ですか? ハイメモリマシンを起動する唯一のオプションはありますか?

Ronak

答えて

0

私はpsqlのテーブルはPostgresデータベースのテーブルを意味し、想定しています。

このバックアップアクティビティや転送データがフロントエンドでどうして必要なのかわかりません。

テーブルのバックアップをCSVファイルに取り込む方法は、copyコマンドを使用しています。コマンドラインから実行することができます。

+0

ありがとうございました。私はコピーコマンドを知っています。私は2〜25 Gbと3〜40 Gbテーブルを持っています。それらをS3に置く必要があります。私が現在使用しているEC2インスタンスは、高いメモリを必要とするためデータをコピーしません。そこで、私はAWS DataPipelineを使ってみました。 –

+0

@ronakAgrawalどのインスタンスクラスを使用していますか? – vira

+0

T2.Medium AWS PipelineがS3にデータをストリーミングしていたにもかかわらず –

関連する問題