マルチパートアップロードS3トリガでラムダをトリガする方法は1回だけですか？

Question

私はAWSラムダ関数があります：Pythonスクリプトを実行しますS3 ObjectCreatedトリガーに

1. 反応し
2. EC2インスタンスにsshと
3. を

このPythonスクリプトは、EMRを実行します作成されたこれらのS3パーツファイルをすべて処理します。 （はい、ファイルが共同で処理する必要があります。）

しかし、パート・ファイル（file_part_0000、file_part_0001、file_part_0002、など）は、マルチパートアップロードとして作成されます。

Lambda Event: {..., "eventName": "ObjectCreated:CompleteMultipartUpload", ...} 

これは、一部のファイルがあるとして、このトリガは、多くの時間としてPythonスクリプトをSSHおよび実行するためにラムダを強制するというのが私の理解です。私はラムダがsshをしてスクリプトを一度だけにしたいと思う。

ラムダを起動させる方法はありますかマルチパートアップロードの各シリーズには1回限りですか？

Answer 1

Configuring Amazon S3 Event Notifications

で述べたようにあなたが失敗した操作からイベント通知を受信しません。

イベントがs3:ObjectCreated:CompleteMultipartUploadとコールされる理由は、マルチパートが完全にアップロードされている場合にのみイベントが発生することです。

一方、SQSに情報を送信するためにS3イベントトリガーを作成する必要があります。だから、あなたのpythonプログラムがSQSキューを見てファイルを処理できるようにすることができます。 SQSを使うと、サーバをsshするためにパスワードなし設定やラムダの秘密鍵の格納をする必要はありません。