2016-08-22 10 views
1

Google Bigquery APIを使用してPythonでバッチインサートを実行する最も効率的な方法は何ですか?私は大規模なデータセット(1 000 000 +)でこのcodeを使用してストリーム行を実行しようとしましたが、挿入するのに時間がかかります。 Pythonで大規模なデータセットを挿入する効率的な方法はありますか?Google BigqueryとPythonを使ったバッチ

  • テーブルが既に存在し、情報があります。
  • 私は挿入したい1ミロンのデータポイントのリストを持っています
  • 私はコードを何回も再利用するので、Pythonでやりたいと思います。

答えて

1

私は(すべてのAPIを挿入)ストリーミングとは思わないが、あなたの場合には理にかなって
あなたはむしろdocumentation

でPythonのコード例を参照してください Load Job
を試してみてください
関連する問題