現在、GoogleのCloud Dataflow SDK(1.6.0)を使用してGCPでデータフロージョブを実行していますが、Apache Beam SDK(0.1.0)に移行する予定です。私たちはまだデータフローサービスを使ってGCPで仕事をしています。誰もがこの移行を経てアドバイスを受けましたか?ここに互換性の問題はありますか?この動きはGCPによって奨励されていますか?Cloud DataflowでのBeam SDKの使用
5
A
答えて
2
Formally Beamはデータフローではまだサポートされていません(これは確かに私たちが取り組んでいるものですが)。特にSLAやサポートが重要な場合は、Dataflow SDKを使用することをお勧めします。つまり、私たちのテストでは、BeamはDataflow上で動作することが示されていますが、いつでも破損する可能性がありますが、あなた自身の責任で試みることは間違いありません。
更新: ザデータフローのSDKは、現在データフローSDK 2.0(https://cloud.google.com/dataflow/release-notes/release-notes-java-2)の放出のようなビームに基づいています。現在、BeamとDataflow SDKの両方がCloud Dataflowでサポートされています。
これはいつでもすぐに変更されると思いますか? – Narek
これに関するアップデートはありますか? –
Dataflow 2.0 SDKは最近リリースされ、Apache Beamに基づくDataflow Java SDKの最初のサポートされているバージョンです。確認してください:https://cloud.google.com/dataflow/release-notes/release-notes-java-2 –