BigQueryでデータを保存する場所

Question

BigQueryIOを使用して、Google DataflowジョブからBigQueryにデータを公開しています。

AFAIK、BigQueryを使用すると、Google Cloud Storage、Googleドライブ、Googleスプレッドのデータをクエリできます。

しかし、データが格納されるBigQueryIOを使用してデータを格納するときは、 Google Cloud Storageにありますか？

Answer 1

クラウドストレージは、ビッグクエリとは別のサービスであるBigQuery OverviewでBigQueryの異なるコンポーネントの詳細を読むことができます。内部的には、Big Queryが独自のストレージを管理します。

Cloud Storageにデータを保存してからbqコマンドを使用してCloud StorageのファイルからBig Queryテーブルを読み込むと、データのコピーが2つ作成されます。

帰結は、次のとおりです。

• あなたはクラウドストレージのコピーを削除すると、データがまだビッグクエリになります。
• 料金には、各コピーの価格が含まれています。 2017年4月の長期保存容量は0.01ドル/ GB、クラウドストレージ容量は0.01〜0.026GB/GBです。
• 同じデータがGCSとBQの両方にある場合は、2回の支払いが行われます。データのバックアップコピーを作成する価値があるかどうかは、あなた次第です。

Answer 2

BigQueryは管理されたデータウェアハウスです。単にデータベースだと言います。

あなたのデータはBigQueryに保存され、SQLクエリを使用してそのデータにアクセスできます。 -

Answer 3

短い答えBigQueryIO書き込み/読み取り/ BigQueryの表から

は少し深く行くためにする：Capacitor柱状のデータ形式で
BigQueryのデータを保存し、そして表、パーティション、列の標準データベースの概念を提供しています、および行。

圧縮、暗号化、レプリケーション、パフォーマンスチューニング、スケーリングなどの構造化データを格納する技術的側面を管理します。

あなたは