boto3 Pythonを使用してaws s3バケット間でファイルとフォルダを再帰的にコピーできますか？

Question

boto3を使用して、あるソースバケット内のすべてのファイルを他のターゲットバケットにコピーすることは可能ですか？ソースバケットには通常のフォルダ構造がありません。

Source bucket: SRC 
Source Path: A/B/C/D/E/F.. 
where in D folder it has some files, 
E folder has some files 

Target bucket: TGT 
Target path: L/M/N/ 

私はboto3を使用して、N個のフォルダの下にTGTバケットにフォルダCからSRCバケットの上からすべてのファイルとフォルダをコピーする必要があります。

APIを知っている人もいれば、このタスクを完了するために新しいPythonスクリプトを書く必要がありますか？

Answer 1

S3ストアオブジェクトはフォルダを保存せず、 '/'または '\'でもオブジェクトキー名の一部です。キー名を操作してデータをコピーするだけで済みます。

import os 
import boto3 
old_bucket_name = 'SRC' 
old_prefix = 'A/B/C/' 
new_bucket_name = 'TGT' 
new_prefix = 'L/M/N/' 
s3 = boto3.resource('s3') 
old_bucket = s3.Bucket(old_bucket_name) 
new_bucket = s3.Bucket(new_bucket_name) 

for obj in old_bucket.objects.filter(Prefix=old_prefix): 
    old_source = { 'Bucket': old_bucket_name, 
        'Key': obj.key} 
    # replace the prefix 
    new_key = obj.key.replace(old_prefix, new_prefix) 
    new_obj = new_bucket.Object(new_key) 
    new_obj.copy(old_source)