BLOBをBlobStoreからGoogle Cloud Storageに移動するにはどうすればよいですか？

Question

私たちのアプリケーションは、Blobstoreを使用してApp Engine上で長年実行されていました。動画ファイルをGoogle Cloud Storageに移動します。 Blobstoreから大規模なBlobをGCSに移行するためのベストプラクティスは何ですか？

BlobReaderを使用してバイトを1つずつGCSに書き込むだけで問題ありませんか？または他のショートカット/ツールがありますか？

のApp EngineからGCSに書き込むために、から選択するライブラリの不足がないとして：

• Blobstore APIはGCSオブジェクトのblobKeyにを生成することができます（、ブロブストアファイルのAPIは廃止されますが、1に対して有効になります時間の使用）
• Google Cloud Storage API（再び）廃止予定が、1回の使用のために有効になります
• Google Cloud Storage Client Library
• Google Cloud Storage Python Library
• Google Cloud Storage JSON API Library
• boto

は、他の上で1つを使用する理由？

Answer 1

私はこれを行う必要はありませんでしたが、私は自動移行ツールがないと言います。だから、あなたはあなた自身を転がす必要があります。

cron.yamlを使用してバッチ・マイグレーションを行い、どのファイルをマイグレーションして別々に配信できるようにするか（this page）クラウドストレージは、オブジェクトの作成後にmd5ハッシュを提供します。これは、Blobstoreコピーを削除する前に各ファイルの移行にエラーがないことを検証するために使用できます（マイグレーション時にファイルが転送中に）。ライブラリのよう

：

• Googleクラウドストレージクライアントライブラリは、メモリワイズ物事がスムーズになり、「ストリーム」に再開可能なアップロード機能ファイルを使用しています。 Google Cloud Storage API/Files APIとは対照的に、かなり信頼できると判断しました。
• JSON APIクライアントは下位レベルです。
• botoは、GAEではなく、デスクトップ上での使用に最適化されています.Google Cloudから移行する（$$$）必要はありません。
• 私が知っている限り、BlobstoreではGCSからファイルを提供し、ユーザーはGCSにファイルをアップロードできますが、アプリケーションからファイルを書き込ませることはできませんそれ自体はです。