Google Dataflowからhttps経由でインターネットに接続できますか？

Question

パイプラインを使用して、ETLを実行する前にGoogle Storageのドキュメントをデータを抽出するWebサービスに送信したいと考えています。

Answer 1

はい、Google Cloud DataflowからHTTPS経由で他のWebサービスに接続することは完全に可能です。データフロートランスフォームで、Webサービスに対して多くのHTTPS要求を行うことができます。

データの抽出ロジックをデータフロートランスフォームとして記述して、より迅速な結果を得ることをお勧めします。 HTTPS要求を行い、Google Cloud Storageからウェブエンドポイント（GCPには存在しないと想定される）にファイルを送信する際、出口コストを考慮する必要があります。