1
私はAWS DATA PIPLINEを使用してPSQLからS3にデータを転送しようとしましたが、メモリの問題でアクティビティが失敗しました。 Javaヒープスペースエラーが発生するAWSデータパイプラインバックアップRDS PSQLからS3へ
psqlテーブル(25Gb)からS3にデータを転送できる複数のソリューションとは何ですか? ハイメモリマシンを起動する唯一のオプションはありますか?
Ronak
私はAWS DATA PIPLINEを使用してPSQLからS3にデータを転送しようとしましたが、メモリの問題でアクティビティが失敗しました。 Javaヒープスペースエラーが発生するAWSデータパイプラインバックアップRDS PSQLからS3へ
psqlテーブル(25Gb)からS3にデータを転送できる複数のソリューションとは何ですか? ハイメモリマシンを起動する唯一のオプションはありますか?
Ronak
私はpsqlのテーブルはPostgresデータベースのテーブルを意味し、想定しています。
このバックアップアクティビティや転送データがフロントエンドでどうして必要なのかわかりません。
テーブルのバックアップをCSVファイルに取り込む方法は、copyコマンドを使用しています。コマンドラインから実行することができます。
ありがとうございました。私はコピーコマンドを知っています。私は2〜25 Gbと3〜40 Gbテーブルを持っています。それらをS3に置く必要があります。私が現在使用しているEC2インスタンスは、高いメモリを必要とするためデータをコピーしません。そこで、私はAWS DataPipelineを使ってみました。 –
@ronakAgrawalどのインスタンスクラスを使用していますか? – vira
T2.Medium AWS PipelineがS3にデータをストリーミングしていたにもかかわらず –