amazon-redshift

0熱

2答えて

0.2TBを格納するために必要なRedshiftノード（dc1.large）の数はいくつですか？

Amazon Redshiftのdc1.largeノードは、SSDに0.16 TBを格納できます。私に0.2 TBのデータがある場合：私はeに切り替える必要がありますか？ g。 2 TBの容量でds2.xlarge？ 2つのdc1.largeノードをクラスタに追加すると、2 * 0.16 TB = 0.32 TBの容量が得られますか？長い質問短い：Redshiftの複数のノードを追加するか、

1熱

1答えて

redshiftで行レベルのバージョン管理を行う方法は？

私はAWS Redshiftを使用して分析クエリを実行しています。クエリは計算を実行し、キーの値を更新します。この結果は、非同期クライアントが消費するキューシステムにエクスポートされます。しかし、キューイングシステムは順序を保証しないので、順序を決定するメカニズムが必要です。 "update_version"列のようなものが必要です。この列は、各更新操作で増分されます。これはoptimistic

0熱

2答えて

Data Vaultの原則を使用してモデル化されたデータベースで相互参照テーブルを使用する方法は？

私はGender属性を持つPerson Satelliteを持っています。ソースシステムから、この属性の値は、F、M、FEMALE、またはMALEのいずれかです。次の2つのアプローチのどちらがデータボールトのモデリングに適していますか？唯一がFEMALEにFをマップするために相互参照表を作成して雌雄に値を標準化性別に保管データにそれが情報源からとビジネスのVaultまたはデータ・マートに来てと

0熱

1答えて

指定したVALUEでUPDATEを使用するとAmazon Redshiftの構文エラーが発生する

これは、複数の行をIDで1つの文字列に更新するために実行しようとしているクエリです。 UPDATE promotion SET engagements = c.engagements FROM (VALUES (668, 73), (684, 135), (680, 73), (672, 76), (682, 94), (676, 4), (670, 81),

2熱

2答えて

Amazon RedshiftでのSQLスクリプトの遅延実行

RedshiftにはPostgreSQLのpg_sleep()に似た機能がありますか？実行を続ける前にしばらく待つ必要のあるSQLスクリプトがあります。 Unsupported PostgreSQL Functionspg_sleep()というRedshiftのドキュメントはサポートされていません。更新1： Redshiftでデッドロックの問題が発生しています。私はDROP/TRUNCATE/

1熱

1答えて

redshiftのハンドルロック

私はRedshiftで複数のSQLスクリプト（1つずつ）を実行するpythonスクリプトを持っています。これらのSQLスクリプト内のテーブルのいくつかは、複数回クエリできます。例えば、表t1は1つのスクリプトで選択でき、別のスクリプトで削除/再作成できます。このプロセス全体が1つのトランザクションで実行されています。今、時々、デッドロックでエラーが検出され、トランザクション全体がロールバックされま

0熱

1答えて

Psycopg2はPythonを使ってredshiftで実行するudf createクエリを許可していますか？

は私が、私はpsycopg2を通じてUDF fucntionを作成、実行しようとすると、は、しかし、何も起こらない...など、私はテーブルを照会し、データを取り戻すことができ、psycopg2のpythonを使用してAWS-赤方偏移に接続できるようにしていますエラーは返されませんが、何も作成されません。私は、デバッガを介して実行しているし、すべてのピースがある def _applyFunctio

1熱

1答えて

AWS Redshift：S3の多くのバケットからデータをロード

S3の2つの異なるバケットからRedshiftテーブルにデータをロードしようとしています。各バケットには、名前に日付を持つディレクトリがあり、各ディレクトリには多数のファイルが含まれていますが、マニフェストはありません。例S3構造： # Bucket 1 s3://bucket1/20170201/part-01 s3://bucket1/20170201/part-02 s3://bu

3熱

2答えて

Amazon RedshiftでスケジュールされたSQLスクリプトを実行するには？

Redshiftで1時間ごとに自動的に実行される〜10個のクエリがあります（おそらく成功/失敗を報告します）。ほとんどのクエリはテーブルの集計です。 AWSラムダをCloudWatch Eventsで使用しようとしましたが、ラムダ関数は最大5分間しか生存せず、クエリには最大25分かかることがあります。

1熱

3答えて

Amazon Redshiftスキーマデザイン

Amazon Redshiftでデータウェアハウスを実装する予定ですが、Redshiftでスキーマを正しく設計する方法についていくつかの提案をお願いします。私はRedshiftを完全に新しくしています。過去に私が「伝統的な」データウェアハウスで作業していたとき、私は「ソース」、「ステージ」、「ファイナル」などのスキーマを作成して、データがどの段階にあるかに応じてすべてのデータベースオブジェクトを