PostgresのJava OutputStreamをS3のInputStreamに直接エクスポートする

Question

私は、Postgres DBからdeltaをエクスポートしてS3バケットにアップロードするという目的を毎日実行するサービスを提供しています。

私はCopyManagerとcopyOutの方法を使用しています。私はFileまたはInputStream受け入れるこのPutObjectRequest持つAmazon S3のクライアントを持っている一方 a）のライター B）のOutputStream

：copyOutで は、私は2つのオプションがあります。

はそれが可能です 1.エクスポートファイルとByteArrayOutputStreamにファイルから 2.エクスポートをアップロードし、彼らはbyte[]の基礎となる取得し、S3のアップローダーの入力ストリームにこれを渡すために：

は現在、我々はこれを行うための2つの方法がありますどういうわけか、私たちがこの中間ファイルを使用する必要がないものと、おそらく非常に大きなバイト配列を接続しますか？言い換えれば

私は直接ストリームを使用しているときに、ストリームを読み取ることができるとすぐに十分なデータを持っているとして、あなたはS3に直接送信、既存の方法はそれほど悪くはない使用デシベルデルタ

Answer 1

をアップロードしたいと思います。

また、AWSパイプラインをセットアップして、Postgres RDSインスタンスからS3にデータを抽出することもできます。https://stackoverflow.com/a/34120407/4296747をチェックできます。 AWSはPostgresからの操作方法についてはあまりよく書かれていませんが、mysqlを使用する際には十分に利用可能です。