0
JavaアプリケーションからBigQueryにデータを取り込みたいとします。 BigQuery APIを直接使用している場合、パフォーマンスに問題はありますか?アプリケーションはAWSで実行されています。JavaアプリケーションからBigQueryにデータを取り込む方法
JavaアプリケーションからBigQueryにデータを取り込みたいとします。 BigQuery APIを直接使用している場合、パフォーマンスに問題はありますか?アプリケーションはAWSで実行されています。JavaアプリケーションからBigQueryにデータを取り込む方法
パフォーマンスに問題がある場合は、Java API [1,2]でBigQueryストリーミング挿入を使用できます。 [3]は、クォータ制限の一部を概説しています。
[1] https://cloud.google.com/bigquery/streaming-data-into-bigquery
[2] https://cloud.google.com/blog/big-data/2017/06/life-of-a-bigquery-streaming-insert
[3] https://cloud.google.com/bigquery/quotas#streaminginserts
私の実際の使用の場合は、我々は我々がそれを処理している新しいメッセージを取得するたびに、我々は電子メールアプリケーションを実行している、ありますいくつかのデータとBQへのストア。私たちがメッセージを受け取るたびにinsertAll apiを呼び出すと、新しいメッセージを受け取るたびにinsertAllを呼び出す必要があることを意味します。そういう意味でinsertAllを呼び出すことはできますか? –