AWS S3オフセットで書き込み

Question

S3のストアドファイル内のオフセットを書き込む可能性はありますか？ファイルはかなり大きいので（毎回数GB）、私たちは本当に本当にリード・モディファイ・ライト用にダウンロードしたくないのです。

Answer 1

S3のデータをに追加する方法はありません。

一つの可能​​な回避策は、必要に応じて毎時間または毎日ケイデンスでこれらの小さなファイルをマージする（おそらくKinesis Firehoseを使用して）新しいファイルを毎回作成し、（おそらくData Pipelineを使用して）E​​MRジョブを実行する可能性があります。