大きなクエリ

にデータをアップロードすると、Google Cloud Platformに読み込まれたファイルを解凍することができます。大きなクエリ

私は33GBのZipファイルがあり、Google Big QueryへのCSVファイルがあります。

解凍した場合、ファイルサイズは215GBを超えています。

215 GBの生データをアップロードするのではなく、Zipファイルを読み込んでGCPで解凍する方法はありますか？

ありがとうございました。

2017-06-24 arcee123

あなたがGZIPを使用しています圧縮？ [This]（https://cloud.google.com/bigquery/preparing-data-for-loading#loading_compressed_and_uncompressed_data）によると、BigQueryはgzippedファイルを取り込めるはずです（ただし、サイドノートを読むのに便利かもしれません）。 –

gzipであれば、Google Cloud StorageからBigQueryに読み込むことができます。それ以外の場合は、GCSに入ったら解凍する方法はないと思います。

一つのオプションは、Compute Engineのをシャットダウンし、十分なハードドライブの空き容量（および好ましくはSSDを）、あなたはそこにやりたいし、そこからGCSにプッシュでGoogle Compute Engineのをスピンアップすることです

出典

2017-08-08 20:28:48

答えて

関連する問題