意思決定スクリプトで特定のアクティビティの実行を停止するAWSデータパイプラインのものは何ですか？

Question

データパイプラインには、次の基準で実行する5本のパイプがあります。 パイプ1 - パイプ4 =日単位 パイプ5 - 月末。

パイプ5に別のパイプラインを作成するオプションを検討しています。これは、パイプ5が他のパイプに依存しないためです。 パイプ5の実行を無視して "error"/"Waiting on dependencies"のステータスなしでパイプを完成させるOOZIEのように、決定変数のようなパイプ5以外のパイプをすべて実行できる方法はありますか？ "？

Answer 1

おそらく、複数のパイプラインを作成して別々のスケジュールに設定する方がよいでしょう。スパイスを欲しがっている場合は、CloudwatchスケジューリングとAWS Lambdaを使用して、パイプラインの作成/削除をcronのようにスケジュールできます。 AWSステップ関数を使用して、各コンポーネントのワークフローを定義することもできます。