amazon-redshift-spectrum

1熱

1答えて

赤方偏移スペクトル：自動的に我々は現在、我々は次のような構造に、S3バケットにアップロード毎日CSVエクスポートを生成し、日付/フォルダ

でテーブルを分割： <report-name> |--reportDate-<date-stamp> |-- part0.csv.gz |-- part1.csv.gz は、我々はで仕切られたレポートを実行できるようにしたいです毎日の輸出。 thisページによれば、Redshift Spectrumのデータは、Spectrumテーブルがデータを取得するソースS3フォルダに

0熱

1答えて

AWSスペクトラムAWS接着剤で生成された寄木細工ファイルの空白結果

AWS接着剤でETLを構築しています。また、クエリのパフォーマンスを最適化するために、データをApacheの一角に格納しています。データが三角形の形式でS3に保存されると、 AWS Spectrumを使用してそのデータを照会しています。開発AWSアカウントでスタック全体を正常にテストしました。しかし、AWSアカウントに移行したとき。私たちは奇妙な問題に悩まされています。クエリを実行すると、行は返

1熱

1答えて

AWS Redshift Spectrum - 外部テーブルのs3ファイル名を取得する方法

AWSスペクトルで作成した外部テーブルを使用してs3データを照会することはできますが、レコードが属するファイル名は識別できません AWS Athenaには、s3ファイル名を表示する擬似列「$ PATH」がありますが、スペクトルを使用しているときに同様の方法がありますか？

3熱

1答えて

Amazon Redshift Spectrumにデータをロード中に

データをamazon redshift外部テーブルにロードしたいデータがCSV形式で、引用符が付きます redshiftのコピーコマンドにREMOVEQUOTESのようなものがありますか？テーブルが。また、どのような外部のテーブルに固定長データをロードするためのさまざまなオプションがあります。

1熱

1答えて

Redshift Spectrum 2つの日付フィールドを使用してテーブルをパーティショニングする

amazon-redshift-spectrumを使用して、パーティションを作成するベストプラクティスを日付で検索していましたが、この例では1つの日付だけパーティションを分割して問題を解決しています。複数の日付フィールドがある場合はどうすればいいですか？例：ようなあなたのs3を分割することでどのように遂行user_install_dateとevent_date とモバイルイベント： instal

2熱

1答えて

アンロード複数の赤方偏移からS3

にファイルこんにちは、私は特定のS3バケットは、エラーの下に取得する赤方偏移から複数のテーブルをアンロードしようとしています： psycopg2.InternalError: Specified unload destination on S3 is not empty. Consider using a different bucket/prefix, manually removing the

1熱

2答えて

雲の形成

と赤方偏移スペクトルを用いて、私は雲の形成テンプレートでRedShift Spectrumリソースを設定します。これを行うためのCFテンプレートパラメータは何ですか？例えば、通常の赤方偏移がtemplated 、などの myCluster: Type: "AWS::Redshift::Cluster" Properties: DBName: "mydb"